摘要：
数据：Student(Sid,Sname,Sage,Ssex)学生表Sid：学号 Sname：学生姓名 Sbirth：学生生日 Ssex：学生性别01 赵雷 1990-01-01 男02 钱电 1990-12-21 男03 孙风 1990-05-20 男04 李云 1990-08-06 男05 周梅 阅读全文
posted @ 2022-01-13 22:13
CHANG_09
阅读(102)
评论(0)
推荐(0)
摘要：
HDFS block丢失过多进入安全模式（Safe mode）的解决方法 背景及现象描述(Background and Symptom) 因磁盘空间不足，内存不足，系统掉电等其他原因导致dataNode datablock丢失，出现如下类似日志： The number of live datanod 阅读全文
posted @ 2022-01-12 19:34
CHANG_09
阅读(977)
评论(0)
推荐(0)
摘要：
Cannot create directory /tmp/hive/root/... Name node is in safe mode. 关闭安全模式: hadoop dfsadmin -safemode leave 阅读全文
posted @ 2022-01-12 18:18
CHANG_09
阅读(376)
评论(0)
推荐(0)
摘要：
使用动态分区插入数据时，无需指定分区键值，系统根据插入的数据，自动分配分区。动态分区需注意以下几点: 需有一个同构的普通表做为源表；分区键值和源表字段之间是根据位置来判断的，而不是根据命名来匹配的，分区键值一般对应SELECT后的最后一个字段；动态分区默认是关闭的，使用前要设置相关参数；下面是一个动 阅读全文
posted @ 2022-01-11 10:36
CHANG_09
阅读(1084)
评论(0)
推荐(0)
摘要：
Hive开发udf函数打包jar文件后，需将jar文件放入hive的运行环境，方法有三。 hive(default) > add jar /opt/module/hive/lib/udf-1.0-SNAPSHOT.jar; 1、进入hive，添加jar， add jar /opt/module/hi 阅读全文
posted @ 2022-01-11 09:16
CHANG_09
阅读(1851)
评论(0)
推荐(0)
摘要：
vim /etc/profile vim /etc/profile.d/my_env.sh 阅读全文
posted @ 2022-01-10 16:32
CHANG_09
阅读(29)
评论(0)
推荐(0)
摘要：
阅读全文
posted @ 2022-01-10 16:31
CHANG_09
阅读(36)
评论(0)
推荐(0)
摘要：
1 #!/bin/bash 2 case $1 in 3 "start") 4 echo "————————————启动 hadoop 集群————————" 5 ssh hadoop106 "/opt/module/hadoop/sbin/start-dfs.sh" 6 ssh hadoop107 阅读全文
posted @ 2022-01-10 15:23
CHANG_09
阅读(235)
评论(0)
推荐(0)
摘要：
./hive --service metastore 初始化 将元数据存储在MySQL bin/schematool -initSchema -dbType mysql hive-env.sh: export HADOOP_HOME=/opt/module/hadoop export HIVE_CO 阅读全文
posted @ 2022-01-10 11:06
CHANG_09
阅读(49)
评论(0)
推荐(0)
摘要：
启动失败： [root@hadoop106 ~]# shells/jps.sh jps 106 17086 DataNode 16942 NameNode 17582 Jps jps 107 16466 DataNode 17017 Jps jps 108 16308 SecondaryNameNo 阅读全文
posted @ 2022-01-08 11:00
CHANG_09
阅读(337)
评论(0)
推荐(0)
浙公网安备 33010602011771号