摘要: 1、用于map的输入,先将输入数据切分成相等的分片,为每一个分片创建一个map worker,这里的切片大小不是随意订的,一般是与HDFS块大小一致,默认是64MB,一个节点上存储输入数据切片的最大size就是HDFS的块大小,当设置的切片size大于HDFS块大小,会引起节点之间的传输,占用带宽。... 阅读全文
posted @ 2015-03-03 21:16 风痕影默 阅读(591) 评论(0) 推荐(0) 编辑
摘要: 突然现在对以后的职业方向有些迷茫,不知道去干什么,现在有一些语言基础,相对而言好的一些有Java和C,选来选去不知道该选择哪个方向,爬了好多网页后,觉得自己应该从java开始出发,之前有点心不在焉,不知道从而且还在中途走了一段的弯路,没事干又跑去研究了一段时间的Php,但是后来发现php可以作为自己... 阅读全文
posted @ 2015-03-03 15:39 风痕影默 阅读(271) 评论(0) 推荐(0) 编辑
友情链接:极限BT