博客园 首页 私信博主 显示目录 隐藏目录 管理 动画

随笔分类 -  Hive

离线数仓 HQL
摘要:Cannot create directory /tmp/hive/root/... Name node is in safe mode. 关闭安全模式: hadoop dfsadmin -safemode leave 阅读全文
posted @ 2022-01-12 18:18 CHANG_09 阅读(378) 评论(0) 推荐(0)
摘要:使用动态分区插入数据时,无需指定分区键值,系统根据插入的数据,自动分配分区。动态分区需注意以下几点: 需有一个同构的普通表做为源表;分区键值和源表字段之间是根据位置来判断的,而不是根据命名来匹配的,分区键值一般对应SELECT后的最后一个字段;动态分区默认是关闭的,使用前要设置相关参数;下面是一个动 阅读全文
posted @ 2022-01-11 10:36 CHANG_09 阅读(1088) 评论(0) 推荐(0)
摘要:Hive开发udf函数打包jar文件后,需将jar文件放入hive的运行环境,方法有三。 hive(default) > add jar /opt/module/hive/lib/udf-1.0-SNAPSHOT.jar; 1、进入hive,添加jar, add jar /opt/module/hi 阅读全文
posted @ 2022-01-11 09:16 CHANG_09 阅读(1861) 评论(0) 推荐(0)
摘要: 阅读全文
posted @ 2022-01-10 16:31 CHANG_09 阅读(36) 评论(0) 推荐(0)
摘要:./hive --service metastore 初始化 将元数据存储在MySQL bin/schematool -initSchema -dbType mysql hive-env.sh: export HADOOP_HOME=/opt/module/hadoop export HIVE_CO 阅读全文
posted @ 2022-01-10 11:06 CHANG_09 阅读(51) 评论(0) 推荐(0)