2018年3月28日
hadoop mapred和mapreduce包
摘要： mapred包是老的1.0的map reduce api mapreduce包是新的2.0的map reduce api 阅读全文
posted @ 2018-03-28 14:43 PhoenixTree(梧桐树) 阅读(207) 评论(0) 推荐(0)
hadoop shuffle
摘要： 1 hadoop shuffle的地位 hadoop shuffle是map reduce算法的核心，是它连接了多个map和多个reduce，它将map的输出交给reduce作为输入。 2 hadoop shuffle工作在哪里 shuffle工作在map端 3 hadoop shuffle做了什么 阅读全文
posted @ 2018-03-28 11:12 PhoenixTree(梧桐树) 阅读(138) 评论(0) 推荐(0)