Hadoop使用实例

1.词频统计

  1. 下载喜欢的电子书或大量文本数据,并保存在本地文本文件
    1.  

       

  2. 编写map与reduce函数
    1.  

       

       

       

  3. 本地测试map与reduce
    1.  

       

  4. 将文本数据上传至HDFS上
    1.  

       

  5. 用hadoop streaming提交任务
    1.  

       

  6. 查看运行结果
    1.  

       

  7. 计算结果取回到本地

 

posted @ 2020-11-06 16:48  胡啊六  阅读(90)  评论(0)    收藏  举报