随笔分类 -  MapReduce

1.MapReduce编程思想和步骤
摘要：MapReduce编程思想 MapReduce分为Map和Reduce两个过程，其中Map负责分，Reduce负责合。shuffle阶段是对数据进行分区，排序，规约，分组等操作。 Map分为2个步骤，Shuffle分为4个步骤，Reduce分为2个步骤 MapReduce编程步骤 Map 读取文件， 阅读全文
posted @ 2021-04-15 19:09 HandsomePlus 阅读(173) 评论(0) 推荐(0)