BD基础01

01

https://hadoop.apache.org/#

 

 

 

02

 

 

03

 

 

04

元数据是描述文教的一些数据   stat 文件名     查看该文件元数据

 

05

 

 

 

 

 

 

06

 

 

 

07

ip已配好 　　4节点的jdk已安装 　　第一个节点下载了Hadoop3.1.1　　免密登陆也完成了

SSH免密登录设置

（1）切换到用户hadoop

#su  hadoop    

（2）在集群所有节点上生成公钥和私钥。

$ ssh-keygen  –t  rsa  

将在~/目录下自动创建目录.ssh，内部创建id_rsa（私钥）和id_rsa.pub（公钥）。

（3）在集群的各个节点上执行下列命令：

$cd  ~/.ssh  

$ssh-copy-id  -i  id_rsa.pub  hadoop@***

 

注意：分别用集群中各个节点名称（包括自身）替换***。

（4）测试SSH免密码登录。

$ssh  hadoop@***

测试成功后，可以执行exit命令结束远程登录。

 

 

 

 

 

08

 

 

09

 

 

 

 

 

10全分布配置

 

 

 

11

格式化

启动

 

 

 1用于合并的角色　　2从节点角色

主节点NameNode 主角的角色

 

 

 

 

 

 

12

 

 

 

 

13

高可用加联邦

 

 

14复制一个全分布，开始配置高可用

1 配置HA使用  2全分布

 

 

 

15

 

 

 

 

16