随笔分类 -  hadoop

从groupby 理解mapper-reducer
摘要：注，reduce之前已经shuff。 http://zheming.wang/blog/2015/05/19/3AFF5BE8-593C-4F76-A72A-6A40FB140D4D/ 简单地说，reduce任务在执行之前的工作就是不断地拉取每个map任务的最终结果，然后对从不同地方拉取过来的数据不 阅读全文

posted @ 2019-10-03 13:21 TMatrix52 阅读(266) 评论(0) 推荐(0)

reducer 按key聚合
摘要： 阅读全文

posted @ 2018-12-04 19:37 TMatrix52 阅读(127) 评论(0) 推荐(0)

导航