摘要: 参考 https://blog.csdn.net/shenshengsu1990/article/details/94625194 结合下图来讲解 ...... JobTracker接收到任务之后,会去访问NameNode获取要处理的文件信息 NameNode将文件块的一些信息返回给JobTrack 阅读全文
posted @ 2019-08-16 14:30 某年某月某某人 阅读(467) 评论(0) 推荐(0)
摘要: 参考 https://blog.csdn.net/u014313009/article/details/38072269 首先开始的是 shuffle-map阶段的流程 依据上图讲解 1、Partition操作 map的输出结果是多个键值对(key和value),将由reduce合并,而集群中有多个 阅读全文
posted @ 2019-08-16 10:42 某年某月某某人 阅读(252) 评论(0) 推荐(0)