hive shuffle优化

1、计算过程文件过多,reduce写入的分区也多。

解决方式是先写到一个临时的小文件中

posted @ 2021-07-15 14:13  guoyu1  阅读(459)  评论(0编辑  收藏  举报