centos 配置 hadoop 小结

找了几个配置向导,折腾了一下,从在win8的vmware下安装centos7开始,到最后在centos里打开hadoop的管理页面,总算是跑起来了。步骤简要记录如下:

1. 安装centos7

选择gnome以方便操作。

注意设置主机名,桥接网络静态ip配置等,主机名大小写要与hadoop配置文件中的主机名一致,桥接配置后检查/etc/sysconfig/network-scripts目录,对ifcfg配置文件仅保留新配置文件及ifcfg-eth0文件。

网络桥接配置网关与windows网关一致,dns可留空。安装好后在windows及centos机器下分别ping对方ip,ping通即可。

2. 配置hadoop

(1)ssh访问:共享rsa key认证文件,以方便centos服务器之间传输;将hadoop涉及到的服务器添加到/root/.ssh/knows_hosts, /etc/hosts等配置文件。

(2)jdk:在sun官方网站下载最新rpm,安装前先卸载centos自带openjdk(若存在)。

安装jdk至/home/java目录,并修改相关配置文件,以使环境变量方便其它程序使用。

(3)hadoop:下载最新hadoop文档版本,tar解压到home目录下并进行配置。

通过start-env.sh,start-yarn.sh启动haddop服务,启动完毕用jpc命令检查服务是否启动。

 

参考:

http://www.cnblogs.com/lanxuezaipiao/p/3525554.html

http://jingyan.baidu.com/album/f00622283a76c0fbd3f0c839.html

posted @ 2016-03-14 22:25  awar  阅读(113)  评论(0)    收藏  举报