2019年7月19日

kafka性能测试代码

摘要： bin/kafka-producer-perf-test.sh --num-records 5000000 --record-size 5000 \ --topic kafkatopic2 \ --broker-list bin/kafka-run-class.sh org.apache.kafka.clients.tools.ProducerPerformance kafka... 阅读全文

posted @ 2019-07-19 23:36 tneduts 阅读(510) 评论(0) 推荐(0) 编辑

hive查询中文乱码问题

摘要： 问题1. hue中中文字符乱码问题，重现步骤如下 create external table test_1_txt (id int, name varchar(100)) location '/tmp/test1' insert into test_1_txt values ( 1,'中国人') c 阅读全文

posted @ 2019-07-19 23:14 tneduts 阅读(1533) 评论(1) 推荐(0) 编辑

presto,dremio,spark-sql与ranger的整合记录

摘要： dremio,spark-sql,presto和ranger的整合 当前，ranger没有现成的插件来管理dremio,spark-sql,presto。 暂时使用的方法是新建一个用户，如presto可以创建一个presto用户，然后在ranger中对presto用户赋予hive,hdfs的访问权限 阅读全文

posted @ 2019-07-19 22:52 tneduts 阅读(2062) 评论(0) 推荐(0) 编辑

导航