Hadoop使用实例

1、下载喜欢的电子书或大量文本数据，并保存在本地文本文件中

 

 

2、编写map与reduce函数

 

 

 

 

3、本地测试map与reduce

 

 

4、将文本数据上传至HDFS上

 

 

5、用hadoop streaming提交任务

 

 

 

 

6、查看运行结果

 

 

7、计算结果取回到本地

 

 

8、批量下载气象数据

 

 

9、解压数据集，并保存在本地文本文件中

 

 

10、编写map与reduce函数

 

 

11、本地测试map与reduce

 

 

12、将气象数据上传至HDFS上

 

 

13、用hadoop streaming提交任务

 

 

14、查看运行结果

 

 15、计算结果取回到本地