会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
沙漏哟
计算机的未来在于联结
哲学 + 社会学 ==> 计算机技术(计算机是人造科学) 经济学 + 心理学 + 大数据 ==> 互联网产品经理(产品设计是社会科学)
博客园
首页
新随笔
管理
2016年7月31日
《OD学hive》第六周20160731
摘要: 一、hive的压缩 1. hadoop的压缩 1)为什么需要压缩 MapReduce的性能瓶颈:网络IO、磁盘IO 数据量:对于MapReduce的优化,最主要、根本就是要能够减少数据量 Combiner:减少跨网络传输的数据量 压缩:将数据量减少,但是需要消耗CPU计算功能 2)哪些地方可以压缩
阅读全文
posted @ 2016-07-31 09:43 沙漏哟
阅读(249)
评论(0)
推荐(0)
公告