2020年8月24日
20年暑假第四周周总结
摘要： 这一周自己大约一共发了3篇博客： 这一周主要学习的是Combiner+GroupingComparator+shuffle原理+Reduce原理MapReduce全流程_分区_排序 MapReduce任务提交和切片源码+各种inputFormat以及自定义inputFormat+自定义inputFo 阅读全文
posted @ 2020-08-24 21:03 喜欢爬的孩子 阅读(139) 评论(0) 推荐(0)
Combiner+GroupingComparator+shuffle原理+Reduce原理
摘要： 1、Combiner Combiner的输入输出对象必须一样。 2、GroupingComparator 运行代码： map package groupcompartor; import org.apache.hadoop.io.LongWritable; import org.apache.had 阅读全文
posted @ 2020-08-24 20:59 喜欢爬的孩子 阅读(197) 评论(0) 推荐(0)