2021年6月19日
MapReduce（十）Shuffle和Sort
摘要： 来源：Hadoop权威指南 MapReduce确保每一个reducer的输入都是依照key排序的。系统执行排序然后传输map的输出给reducer的过程被称为shuffle。本文中，我们将讲解shuffle是如何工作的，这些内容对于你优化MapReduce会有所帮助。 Map端 当map函数开始输出 阅读全文
posted @ 2021-06-19 15:16 ralgo 阅读(412) 评论(0) 推荐(0)