Hadoop综合大作业

Hadoop综合大作业 要求：

1.用Hive对爬虫大作业产生的文本文件（或者英文词频统计下载的英文长篇小说）词频统计。

我下载了一篇英文小说来进行词频统计分析。

首先启动hadoop

文件上传到hdfs

 

启动hive

创建小说表，并导入数据

用HQL进行词频统计，结果放在表word_count里

查看统计结果

2.用Hive对爬虫大作业产生的csv文件进行数据分析，写一篇博客描述你的分析过程和分析结果。

用excel放入hive的sh文件

正常输出的查看信息