摘要:
hive配置角度优化: (1)列剪裁 hive在查询时,只查询用到的列 (2)分区裁剪 hive在查询时将分区放入子查询中查询更加高效,可以减少读入的分区数目 (3)join优化 在编写带有join的语句时,将条目少的放在join操作符的左边,因为在reduce阶段,位于join操作符左边的数据会被 阅读全文
posted @ 2019-09-06 16:22
hulifang
阅读(326)
评论(0)
推荐(0)
摘要:
静态和动态分区表差不多一样,只不过在导入数据时需要加上条件: insert overwrite table p_user partition(occupationid) select id,gender,age,zip,occupationid from user; insert overwrite 阅读全文
posted @ 2019-09-06 14:29
hulifang
阅读(360)
评论(0)
推荐(0)