2019 年 11月 18 日随笔档案 - 金猫大帝

2019年11月18日

摘要： Shuffle过程是MapReduce整个工作流程的核心环节。 Shuffle过程是指对Map输出结果进行分区、排序、合并、归并处理后输入Reduce的过程。分为Map端和Reduce端两个部分。 Map端Shuffle过程的理解：数据经过Map的逻辑处理后，Map将他们输出，由Shuffle进行阅读全文

posted @ 2019-11-18 15:27 金猫大帝阅读(901) 评论(0) 推荐(0) 编辑