随笔分类 - hive相关
摘要:在hive上建表与普通分区表创建方法一样; 在shell脚本中,需设置的参数: set hive.exec.dynamic.partition=true; #开启动态分区,默认是falseset hive.exec.dynamic.partition.mode=nostrict; #开启允许所有分区
阅读全文
摘要:我昨天在hive上建表,一直报Display all 459 possibilities? (y or n) ,之前我以为是建表语句有问题,一直在改语句,后来在网上搜这个错误,原来语句里混杂了Tab缩进,这可能是我使用notepad++的时候打出来的; 解决方案:把它粘到plsql里,将空格和缩进都
阅读全文
摘要:1. order by Hive中的order by跟传统的sql语言中的order by作用是一样的,会对查询的结果做一次全局排序,所以说,只有hive的sql中制定了order by所有的数据都会到同一个reducer进行处 理(不管有多少map,也不管文件有多少的block只会启动一个redu
阅读全文
摘要:hive函数之数学函数 round(double d)--返回double型d的近似值(四舍五入),返回bigint型; round(double d,int n)--返回保留double型d的n位小数double型近似值(四舍五入); floor(double d)--返回<=d的最大bigint
阅读全文