随笔分类 -  大数据

大数据 MapReduce流程
摘要：MapReduce的整个流程： 1）每个map任务对应一个split分片的数据，split分片的大小由设置的maxSplitSize、 minSplitSize和block的大小决定。 splitSize = max(minSplitSize,min(maxSplitSize,blockSize)) 阅读全文
posted @ 2020-06-02 01:07 wuyiping 阅读(222) 评论(0) 推荐(0)