大数据技术之Hadoop3.1.2版本联邦（federation）模式

　　　　　　　　　　　　　　　　大数据技术之Hadoop3.1.2版本联邦（federation）模式

　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　作者：尹正杰

版权声明：原创作品，谢绝转载！否则将追究法律责任。

 

 

一.HDFS 3.x Federation模式（http://hadoop.apache.org/docs/current/hadoop-project-dist/hadoop-hdfs/Federation.html）

1>.通过多个namenode/namespace（Fsimage）把元数据的存储和管理分散到多个节点中，使到namenode/namespace可以通过增加机器来进行水平扩展。

2>.能把单个namenode的负载分散到多个节点中，在HDFS数据规模较大的时候不会也降低HDFS的性能。

3>.可以通过多个namespace来隔离不同类型的应用，把不同类型应用的HDFS元数据的存储和管理分派到不同的namenode中。

4>.不同namenode的namespace（Fsimage）数据他们是无法相互访问的。

 

 

二.