随笔分类 -  Hadoop内部分析

摘要:Mapreduce 工作机制图:图中1:表示待处理数据,比如日志,比如单词计数图中2:表示map阶段,对他们split,然后送到不同分区图中3:表示reduce阶段,对这些数据整合处理。图中4:表示二次mapreduce,这个是mapreduce的链式MapReduce组合式,迭代式,链式问题导读:... 阅读全文
posted @ 2015-05-27 20:35 MasonWangCN 阅读(738) 评论(0) 推荐(0)