centos 配置 hadoop 小结
找了几个配置向导,折腾了一下,从在win8的vmware下安装centos7开始,到最后在centos里打开hadoop的管理页面,总算是跑起来了。步骤简要记录如下:
1. 安装centos7
选择gnome以方便操作。
注意设置主机名,桥接网络静态ip配置等,主机名大小写要与hadoop配置文件中的主机名一致,桥接配置后检查/etc/sysconfig/network-scripts目录,对ifcfg配置文件仅保留新配置文件及ifcfg-eth0文件。
网络桥接配置网关与windows网关一致,dns可留空。安装好后在windows及centos机器下分别ping对方ip,ping通即可。
2. 配置hadoop
(1)ssh访问:共享rsa key认证文件,以方便centos服务器之间传输;将hadoop涉及到的服务器添加到/root/.ssh/knows_hosts, /etc/hosts等配置文件。
(2)jdk:在sun官方网站下载最新rpm,安装前先卸载centos自带openjdk(若存在)。
安装jdk至/home/java目录,并修改相关配置文件,以使环境变量方便其它程序使用。
(3)hadoop:下载最新hadoop文档版本,tar解压到home目录下并进行配置。
通过start-env.sh,start-yarn.sh启动haddop服务,启动完毕用jpc命令检查服务是否启动。
参考:
http://www.cnblogs.com/lanxuezaipiao/p/3525554.html
http://jingyan.baidu.com/album/f00622283a76c0fbd3f0c839.html
浙公网安备 33010602011771号