随笔分类 -  hadoop2.6

摘要:1、hadoop环境搭建,版本:2.6.2,参考:http://www.cnblogs.com/bookwed/p/5251393.html 启动服务:在master机器上,进入hadoop安装目录,执行命令:./sbin/start-all.sh 查看是否启动成功:jps 2、zookeeper环 阅读全文
posted @ 2016-03-30 11:38 bookwed 阅读(2992) 评论(0) 推荐(0)
摘要:环境:window7+eclipse+vmware虚拟机+搭建好的hadoop环境(master、slave01、slave02) 内容:主要是在windows环境下,利用eclipse如何来操作hdfs,如上传文件、删除文件、创建文件夹、查看节点信息等。 eclipse开发环境的搭建,请参考:ht 阅读全文
posted @ 2016-03-15 17:24 bookwed 阅读(933) 评论(0) 推荐(0)
摘要:1、准备三台机器,机器名是:master、slave01、slave02 1.1 最小化安装centos6.5 1.2 安装ssh,yum -y install openssh-clients(这一步安装是因为系统最小化安装时,这个组件是没有的) 1.3 修改主机名 vi /etc/sysconfi 阅读全文
posted @ 2016-03-07 18:02 bookwed 阅读(958) 评论(0) 推荐(0)
摘要:一、准备插件 1、自己编译 1.1 安装Ant 1.2 下载hadoop2.6.0 http://hadoop.apache.org/releases.html#News,选择2.6.0的binary 1.3 下载hadoop2x-eclipse-plugin源代码 地址:https://githu 阅读全文
posted @ 2015-09-17 16:31 bookwed 阅读(6880) 评论(0) 推荐(0)
摘要:为了方便操作,可以把hadoop加入环境变量 修改,vi ~/.bashrc 0、查看状态 bin/hdfs dfsadmin -report 1、创建文件目录 bin/hdfs dfs -mkdir /in/input2 2、删除目录 bin/hdfs dfs -rmr /in/input2 删除 阅读全文
posted @ 2015-09-17 09:44 bookwed 阅读(585) 评论(0) 推荐(0)