2.20

课前测试主要是对一部分数据清洗，然后使用hive注入数据后 清洗成需要的格式

 然后根据要求统计出需要的数据

 

 

 然后使用sqoop将hive中统计出来的数据传递到本地mysql数据库中，

sqoop export \
--connect jdbc:mysql://10.99.116.113:3306/edu4out \
--username root \
--password 123456789 \
--table govnums \
--columns 'govname,num' \
--input-fields-terminated-by '|' \
--input-lines-terminated-by '\n' \
--export-dir 'hdfs://master:8020/apps/hive/warehouse/edu3.db/govnums' \
--num-mappers 1

 

然后使用echart图表来将这些统计到的数据通过柱状图的形式表现出来