会员
周边
新闻
博问
闪存
众包
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
志者之梦
博客园
首页
新随笔
联系
订阅
管理
随笔分类 -
Hive-SQL
Hive优化
摘要:一、map阶段优化 map端: spill(100M,80%)-->meger(压缩)参数:io.sort.mb(default100)当map task开始运算,并产生中间数据时,其产生的中间结果并非直接就简单的写入磁盘。而是会利用到了内存buffer来进行已经产生的部分结果的缓存,并在内存buf
阅读全文
posted @
2017-06-12 18:42
志者之梦
阅读(448)
评论(0)
推荐(0)
公告