CentOS6.3下hadoop-1.2.1的本地安装
1. 下载hadoop源码:
http://apache.fayea.com/apache-mirror/hadoop/common/hadoop-1.2.1/hadoop-1.2.1.tar.gz
2. 相关软件准备:
2.1 配置java
参见http://www.cnblogs.com/naterliu/articles/3580932.html操作。注:需在/etc/profile中配置java环境变量。
2.2 安装ssh和rsync
[root@centos-lx /]# yum install ssh
[root@centos-lx /]# yum install rsync
3. 配置hadoop单节点环境:
(假设hadoop的下载目录为:/usr/setup/hadoop/hadoop-1.2.1.tar.gz,安装目录为: /usr/hadoop)
3.1 解压缩:
[root@centos-lx /]# cd /usr/setup/hadoop
[root@centos-lx hadoop]# tar xzvf hadoop-1.2.1.tar.gz
3.2 拷贝hadoop源文件到安装目录
[root@centos-lx hadoop]# cp -rf hadoop-1.2.1/* /usr/hadoop/
3.3 测试
[root@centos-lx hadoop]# mkdir input // 创建输入文件目录
[root@centos-lx hadoop]# cp conf/*.xml input // 拷贝配置文件到输入文件目录
[root@centos-lx hadoop]# bin/hadoop jar hadoop-examples-*.jar grep input output 'dfs[a-z.]+' // 执行hadoop相关目录
检查结果文件:
[root@centos-lx hadoop]# cat output/*
输出:1 dfsa
[root@centos-lx hadoop]# cd output/
[root@centos-lx output]# ls
输出:part-00000 _SUCCESS
[root@centos-lx output]# cat part-00000
输出:1 dfsa
浙公网安备 33010602011771号