2018年10月24日
hive 调优
摘要： 1、架构优化 hive和关系型数据刻的区别： 2、MR阶段优化 MR可以主要分为Map、shuffle、Reduce三个阶段。 1）Map优化 2）Reduce优化 3）Shuffle阶段优化 • 压缩中间数据– 减少磁盘操作– 减少网络传输数据量• 配置方法： ***在hive端设置中间文件是否压 阅读全文
posted @ 2018-10-24 14:37 艳荀 阅读(548) 评论(0) 推荐(0)