2021年1月12日
HIVE问题
摘要： 一、数据倾斜问题 1、数据倾斜的原因：（1）、key分布不均匀。（2）、业务数据本身的原因。（3）、建表考虑不周。（4）、某些SQL本身就有数据倾斜。 2、如何避免数据的倾斜： （1）给key一个随机的值，打散key。 （2）Hive中的参数调节：①hive.map.aggr = true。②hiv 阅读全文
posted @ 2021-01-12 10:32 lenomail 阅读(147) 评论(0) 推荐(0)