lenmom

博客园 首页 新随笔 联系 订阅 管理

2019年9月5日 #

摘要: https://www.cnblogs.com/kevingrace/p/6110842.html 阅读全文
posted @ 2019-09-05 18:26 老董 阅读(259) 评论(0) 推荐(0) 编辑

摘要: 1. map数计算方式 2. 影响map个数的因素 3.修改map个数 3.1 合并小文件减少map数 a)输入合并。即在Map前合并小文件set mapred.min.split.size=100000000;set mapred.max.split.size=100000000;-- 一个节点上 阅读全文
posted @ 2019-09-05 10:06 老董 阅读(3262) 评论(0) 推荐(0) 编辑