随笔分类 -  hadoop

摘要：这里使用的环境和上一篇的一样。上一篇的Mapreduce是在本地执行任务，在http://192.168.1.2:8088/cluster 在如下图中是看不到job的提交，本篇将指导你怎么在windows中提交job到远程linux上面。意思在一般开发的时候，我们可以在window上做开发，在lin 阅读全文

摘要：前面文章已经搭建好windows环境。上述环境都是使用到2.6.0版本的hadoop，如果有不懂的地方可以联系QQ1565189664 ,接下来主要讨论如何在windows本地中执行MapReduce 任务 这里使用Maven作为项目管理工具，jdk1.8 项目结构如下 WCount.java文件代 阅读全文

摘要：1、先安装好hadoop 集群 参考文档http://www.cnblogs.com/bornteam/p/6517960.html 1、先安装好hadoop 集群 参考文档http://www.cnblogs.com/bornteam/p/6517960.html 2、首先安装好集群，再把去下载h 阅读全文

摘要：1、先使用groupadd hadoop 建立hadoop用户组 2、新建用户，useradd -d /usr/hadoop -g hadoop -m hadoop （新建用户hadoop指定用户主目录/usr/hadoop 及所属组hadoop） 3、passwd hadoop 设置hadoop密 阅读全文