CentOS6.3下hadoop-1.2.1的本地安装

1. 下载hadoop源码:

http://apache.fayea.com/apache-mirror/hadoop/common/hadoop-1.2.1/hadoop-1.2.1.tar.gz

2. 相关软件准备:

2.1 配置java

参见http://www.cnblogs.com/naterliu/articles/3580932.html操作。注:需在/etc/profile中配置java环境变量。

2.2 安装ssh和rsync

[root@centos-lx /]# yum install ssh

[root@centos-lx /]# yum install rsync

3. 配置hadoop单节点环境:

    (假设hadoop的下载目录为:/usr/setup/hadoop/hadoop-1.2.1.tar.gz,安装目录为: /usr/hadoop)

3.1 解压缩:

[root@centos-lx /]# cd /usr/setup/hadoop

[root@centos-lx hadoop]# tar xzvf hadoop-1.2.1.tar.gz

3.2 拷贝hadoop源文件到安装目录

[root@centos-lx hadoop]# cp -rf hadoop-1.2.1/* /usr/hadoop/

3.3 测试

[root@centos-lx hadoop]# mkdir input  // 创建输入文件目录

[root@centos-lx hadoop]# cp conf/*.xml input   // 拷贝配置文件到输入文件目录

[root@centos-lx hadoop]# bin/hadoop jar hadoop-examples-*.jar grep input output 'dfs[a-z.]+'   // 执行hadoop相关目录

检查结果文件:

[root@centos-lx hadoop]# cat output/*

输出:1   dfsa

[root@centos-lx hadoop]# cd output/

[root@centos-lx output]# ls

输出:part-00000    _SUCCESS

[root@centos-lx output]# cat part-00000

输出:1   dfsa

 

 

 

posted @ 2014-03-05 17:06  naterliu  阅读(94)  评论(0)    收藏  举报