2017年8月15日
hive数据倾斜问题
摘要： 卧槽草草 来源于其它博客： 貌似我只知道group by key带来的倾斜 hive在跑数据时经常会出现数据倾斜的情况，使的作业经常reduce完成在99%后一直卡住，最后的１%花了几个小时都没跑完，这种情况就很可能是数据倾斜的原因，解决方法要根据具体情况来选择具体的方案 １、join的key值发生 阅读全文
posted @ 2017-08-15 18:23 simple_wxl 阅读(2421) 评论(0) 推荐(0)