随笔分类 -  mapreduce

MapReduce优化设置
摘要：Map阶段的优化 主要是确定合适的Map数。那么首先要了解Map数的计算公式： num_Map_tasks = max[${Mapred.min.split.size}， min(${dfs.block.size}， ${Mapred.max.split.size})] Mapred.min.spl 阅读全文

posted @ 2016-07-07 11:37 奏乐 阅读(665) 评论(0) 推荐(0)

导航