04 2021 档案

4.21
摘要：4.21 阅读全文
posted @ 2021-04-21 16:52 Simon92 阅读(46) 评论(0) 推荐(0)
华为云创建udf
摘要：如何使用 1.把以上程序打包成AddDoublesUDF.jar，并上传到HDFS指定目录下(如“/user/hive_examples_jars/”)且创建函数的用户与使用函数的用户有该文件的可读权限。示例语句： hdfs dfs -put ./hive_examples_jars /user/h 阅读全文
posted @ 2021-04-20 10:00 Simon92 阅读(204) 评论(0) 推荐(0)
jmx
摘要：http://ops3:8088/ws/v1/cluster/apps?states=running This XML file does not appear to have any style information associated with it. The document tree i 阅读全文
posted @ 2021-04-16 23:45 Simon92 阅读(135) 评论(0) 推荐(0)
4月7号
摘要：4月7号 阅读全文
posted @ 2021-04-07 22:09 Simon92 阅读(44) 评论(0) 推荐(0)
Ambari+HDP 部署
摘要：Ambari+HDP 部署 • HDP是Hortonworks公司推出的Hadoop发行版，目前大版本最高为3。由于Cloudera和Hortonworks已在2018年合并，且今后该公司的集群管理软件都会在CM的基础上继续迭代，因此HDP的安装方法我们只做了解即可。 • 我们安装Ambari 2. 阅读全文
posted @ 2021-04-05 20:39 Simon92 阅读(398) 评论(0) 推荐(0)
2021年4月4
摘要：sentry缺点： 1、组件只支持hive、hdfs、impala 不支持hbase,stome等 show roles; create role admin_zr; 0: jdbc:hive2://cbp5.chinaoly.com:10000/> grant all on server serv 阅读全文
posted @ 2021-04-04 18:26 Simon92 阅读(109) 评论(0) 推荐(0)
集群资源队列监控：Grafana
摘要：集群资源队列监控：Grafana common.sh #!/bin/sh . ~/.bashrc home=$(cd `dirname $0`; cd ..; pwd) bin_home=$home/bin config_home=$home/conf logs_home=$home/logs li 阅读全文
posted @ 2021-04-03 12:04 Simon92 阅读(366) 评论(0) 推荐(0)
笔记5
摘要：#!/bin/sh home=$(cd `dirname $0`; cd ..; pwd) . ${home}/bin/common.sh export HADOOP_HEAPSIZE=20000 fsimage_binary_name=`ls ${fsimage_binary_path} | gr 阅读全文
posted @ 2021-04-01 23:11 Simon92 阅读(79) 评论(0) 推荐(0)