05 2018 档案

Hadoop综合大作业
摘要：一、用Hive对爬虫大作业产生的文本文件（或者英文词频统计下载的英文长篇小说）词频统计。 1.启动hadoop 2.Hdfs上创建文件夹并查看 3.上传英文词频统计文本至hdfs 4.启动Hive 5.导入文件内容到表docs并查看 6.进行词频统计，结果放在表t_word_count里 7.查看统 阅读全文
posted @ 2018-05-21 12:25 191钟菲菲 阅读(1042) 评论(0) 推荐(0)
hive基本操作与应用
摘要：通过hadoop上的hive完成WordCount 1.启动hadoop 2.Hdfs上创建文件夹 3.上传文件至hdfs 4.启动Hive 5.创建原始文档表 6.导入文件内容到表docs并查看 7.用HQL进行词频统计，结果放在表word_count里 8.查看统计结果 阅读全文
posted @ 2018-05-16 20:41 191钟菲菲 阅读(109) 评论(0) 推荐(0)