07 2020 档案

摘要:2020-07-30 14:19:34,034 INFO [main] org.apache.hadoop.hive.ql.exec.ReduceSinkOperator: RECORDS_OUT_INTERMEDIATE:50, 2020-07-30 14:19:34,037 FATAL [mai 阅读全文
posted @ 2020-07-30 16:00 Lucky、Dog 阅读(1342) 评论(0) 推荐(0)
摘要:这个是Flink 1.11.1 使用yarn-session 出现的错误;原因是在Flink1.11 之后不再提供flink-shaded-hadoop-*” jars 需要在yarn-session.sh 文件中添加 或者在环境变量中添加 export HADOOP_CLASSPATH=`hado 阅读全文
posted @ 2020-07-27 13:57 Lucky、Dog 阅读(4911) 评论(0) 推荐(0)
摘要:1. Realm 是什么?汉语意思:领域,范围;王国;这个比较抽象; 简单一点就是:Realm 用来对用户进行认证和角色授权的 再简单一点,一个用户怎么判断它有没有登陆?这个用户是什么角色有哪些权限? 是不是需要我们查询数据库或者从缓存中获取相关的角色信息或者进行登陆认证。 2. 其实呢?就是我们说 阅读全文
posted @ 2020-07-24 15:44 Lucky、Dog 阅读(515) 评论(0) 推荐(0)
摘要:AAA 指的是 hdfs 文件系统的用户 BBB 是hive 设置的 hiveserver2 配置文件中的登陆用户名 在hadoop 配置如下 <property> <name>hadoop.proxyuser.AAA.hosts</name> <value>*</value> </property 阅读全文
posted @ 2020-07-10 21:22 Lucky、Dog 阅读(744) 评论(0) 推荐(0)