12 2020 档案

摘要:2.1 数据准备 数据集下载与查看 cd /usr/local ls sudo mkdir bigdatacase sudo chown -R hadoop:hadoop ./bigdatacase cd bigdatacase mkdir dataset cd ~/下载 ls unzip user 阅读全文
posted @ 2020-12-30 17:20 钟爱国 阅读(119) 评论(0) 推荐(0)
摘要:mysql准备接受数据的数据库与表 2.hive准备待传输的数据 3.sqoop进行数据传输 4.mysql查看传输结果 5.电子书 阅读全文
posted @ 2020-12-12 12:57 钟爱国 阅读(41) 评论(0) 推荐(0)
摘要:1.准备本地txt文件 2.启动hadoop,启动hive start-all.sh hive 3.创建数据库,创建文本表 4.映射本地文件的数据到文本表中 5.hql语句进行词频统计交将结果保存到结果表中 二、hive用HDFS上的文件进行词频统计 1.准备电子书或其它大的文本文件 2.将文本文件 阅读全文
posted @ 2020-12-06 14:47 钟爱国 阅读(52) 评论(0) 推荐(0)