12 2020 档案

摘要:使用sqoop进行将Hive 词频统计的结果数据传输到Mysql中。 mysql准备接受数据的数据库与表 hive准备待传输的数据 sqoop进行数据传输 mysql查看传输结果 先用测试文件做实验,成功后将电子书的统计结果传输出mysql中。 一.测试文件 1.mysql准备接受数据的数据库与表 阅读全文
posted @ 2020-12-29 23:03 Fk020306 阅读(62) 评论(0) 推荐(0)
摘要:网站用户行为分析 1. 本地数据集上传到数据仓库Hive 数据集下载与查看 数据集预处理 把数据集导入HDFS中 在Hive上创建数据库 2. Hive数据分析 给出数据分析需求 用select语句实现数据分析 数据分析结果查看与保存 3. Hive、MySQL、HBase数据互导 1. 本地数据集 阅读全文
posted @ 2020-12-29 23:00 Fk020306 阅读(498) 评论(0) 推荐(0)
摘要:一、hive用本地文件进行词频统计 1.准备本地txt文件 mkdir wccd wc echo "hadoop hbase" > f1.txt echo "hadoop hive" > f2.txt 2.启动hadoop,启动hive start-all.sh jps hive 3.创建数据库,创 阅读全文
posted @ 2020-12-06 21:53 Fk020306 阅读(178) 评论(0) 推荐(0)