2016年1月7日

MapReduce深入理解输入和输出格式(1)-输入分片与记录

摘要: 一个输入分片( in put split)就是能够被单个map 操作 处理的输入块. 每一个map 操作只处理一个输入分片,并且一个一个地处理每条记录,也就是一个键/值对。输入分片和记录都是逻辑上的,并不必要将它... 阅读全文

posted @ 2016-01-07 22:11 MrCharles在cnblogs 阅读(262) 评论(0) 推荐(0)

Hadoop构架概览

摘要: hadoop是一个开源的软件框架,是一个利用商业硬件处理和存储大型数据的软件。从下到上主要有五个主要的组成部分:集群,是一套主机(节点)组成的。节点可以以机架划分。这个是硬件级别的构架.YARN构架 (目前为止的... 阅读全文

posted @ 2016-01-07 20:57 MrCharles在cnblogs 阅读(121) 评论(0) 推荐(0)

Spring Http Basic(基本)和Digest(摘要)验证

摘要: Basic(基本)和Digest(摘要)验证都是web应用中很受欢迎的可选机制。 Basic验证一般用来处理无状态的客户端,它们在每次请求都附带它们的证书。 很常见的用法是把它和基于表单的验证一起使用,这里的应用... 阅读全文

posted @ 2016-01-07 12:47 MrCharles在cnblogs 阅读(768) 评论(0) 推荐(0)

导航