2019年4月28日
3.11-3.14 Hive 企业使用优化2
摘要： 一、查看HQL执行计划explain1、explainhive在执行的时候会把所对应的SQL语句都会转换成mapreduce代码执行，但是具体的MR执行信息我们怎样才能看出来呢？这里就用到了explain的关键字，他可详细的表示出在执行所对应的语句所对应的MR代码。语法格式如下。extended关键字可以更加详细的列举出代码的执行过程。Hive提供了一个EXPLAIN显示查询执行计划的命令。该语句... 阅读全文
posted @ 2019-04-28 16:22 米兰的小铁將 阅读(418) 评论(0) 推荐(0)
3.7-3.10 Hive 企业使用优化1
摘要： 一、Fetch Task在执行hive代码的时候，一条简单的命令大部分都会转换成为mr代码在后台执行，但是有时候我们仅仅只是想获取一部分数据而已，仅仅是获取数据，还需要转化成为mr去执行吗？那个也太浪费时间和内存啦，所以有一个hive的配置如下所示：#在hive-default.xml.template默认配置中可知：SELECT STAR, FILTER on partition columns... 阅读全文
posted @ 2019-04-28 15:03 米兰的小铁將 阅读(172) 评论(0) 推荐(0)