07 2019 档案

获取active nn并替换hue.ini
摘要：当前使用hdp3.1,安装namenode ha,配置hue使用的时候需要安装httpfs,但这个版本的httpfs是空的包，安装后很多目录都没有，不能用， 所以采用了上面的方法，配置一个crontab * * * * * /xxx.sh 一分钟检查一次，如果active nn和配置文件中的acti 阅读全文

posted @ 2019-07-21 11:36 tneduts 阅读(195) 评论(0) 推荐(0)

kafka性能测试代码
摘要：bin/kafka-producer-perf-test.sh --num-records 5000000 --record-size 5000 \ --topic kafkatopic2 \ --broker-list bin/kafka-run-class.sh org.apache.kafka.clients.tools.ProducerPerformance kafka... 阅读全文

posted @ 2019-07-19 23:36 tneduts 阅读(519) 评论(0) 推荐(0)

hive查询中文乱码问题
摘要：问题1. hue中中文字符乱码问题，重现步骤如下 create external table test_1_txt (id int, name varchar(100)) location '/tmp/test1' insert into test_1_txt values ( 1,'中国人') c 阅读全文

posted @ 2019-07-19 23:14 tneduts 阅读(1598) 评论(1) 推荐(0)

presto,dremio,spark-sql与ranger的整合记录
摘要：dremio,spark-sql,presto和ranger的整合 当前，ranger没有现成的插件来管理dremio,spark-sql,presto。 暂时使用的方法是新建一个用户，如presto可以创建一个presto用户，然后在ranger中对presto用户赋予hive,hdfs的访问权限 阅读全文

posted @ 2019-07-19 22:52 tneduts 阅读(2108) 评论(0) 推荐(0)

导航