Fork me on GitHub
2018年1月10日
Hadoop源码篇--Reduce篇
摘要： 一。前述 Reduce文件会从Mapper任务中拉取很多小文件，小文件内部有序，但是整体是没序的，Reduce会合并小文件，然后套个归并算法，变成一个整体有序的文件。 二。代码 ReduceTask源码： 源码1.1排序比较器，当用户不设置的时候取排序比较器实现，此时如果用户配置排序比较器，用排序比 阅读全文
posted @ 2018-01-10 21:22 L先生AI课堂 阅读(992) 评论(1) 推荐(0) 编辑