Hadoop集群搭建

工具准备：

1.虚拟机三台

2.Hadoop工具包  下载地址：http://archive.apache.org/dist/hadoop/core/hadoop-2.6.0/

环境准备：

1.修改IP和主机名：

　　a）hostname    查看主机名

　　　　

　　　　

　　　　　　　　

　　　　子机器：

 　　　　

　　　　Master机器：

　　　　 

　　　　重启：

　　　　 

　　　　规划后的机器如下面所示：

　　　　　　　　主机名                     ip地址

　　　　　　　　Master.hadoop      192.168.40.128

　　　　　　　　Slave1.hadoop      192.168.40.129

　　　　　　　　Slave2.hadoop      192.168.40.130

 

 　　　　注意：

1. 1. 　　#临时关闭，不用重启机器：  
   2. 　　setenforce 0   
   3. 　　#永久关闭，需要重启机器：  
   4. 　　vi /etc/sysconfig/selinux   
   5. 　　#下面为selinux文件中需要修改的元素  
   6. 　　SELINUX=disabled 

　　b）建立ip与主机之间的映射，使得集群内部虚拟机之间互相通信（通过主机名）

　　　　

　　c）查看虚拟机状态命令：　

　　　　systemctl status firewalld 

　　d）关闭防火墙命令：

　　　　service iptables stop

　　　　

　　e）关闭SELinux

　　　　查看状态命令：sestatus

　　　　关闭命令：

　　　　

　　f）创建用户组创建用户

　　　　　

　　g）给hadoop分配权限并安装和启动ssh协议

　　　　  

　　　    

　　　　

　　　　

　　　　

 

 

　　H）配置Master无密码登录所有Salve

　　　　

　　　　

　　　　

　　　　

　　j）接着在Master节点上做如下配置，把id_rsa.pub追加到授权的key里面去，要在hadoop权限下面操作。

　　　　

　　k）免去密码提示

　　　　

　　l）设置SSH配置

　　　　

　　　　

　　　　

　　M）执行 ssh localhost并修改钥匙存放地址

 

　　　　

　　　　

　　　　

　　n）涉及到的几个文件