摘要: 文章主要是介绍hadoop的mapreduce的一个小案例,主要是统计数据文本word.txt中每个单词出现的次数。1、启动hadoop的dfs、yarn;2、上传word.txt文件到hadoop的dfs中,可以使用命令或者用javaAPI上传 命令上传 ,在当前文件目录下输入 : hadoop... 阅读全文
posted @ 2015-06-14 03:18 南国树下 阅读(487) 评论(0) 推荐(0)
摘要: 前提:1、搭建好hadoop伪分布式环境;2、安装好eclipse;注:修改 /etc/hosts 添加 “本机IP hadoop01” , 那么代码中创建hdfs文件系统的时候的URIhdfs://hadoop01:9000相当于 hdfs://hadoop服务器ip(例如:192.168.1... 阅读全文
posted @ 2015-06-13 05:48 南国树下 阅读(444) 评论(0) 推荐(0)