HDFS Federation

Federation机制

Federation机制是HDFS集群Namespace的水平扩展方案，解决了单个Namenode的内存和性能问题；

Federation原理

如下图所示，管理节点为Namenode集群，集群中的每个Namenode相互独立，负责管理Namespace的部分服务，DataNode与所有的Namenode建立连接，发送周期性心跳和块报告。

Federation优点

1. Namespace可水平扩展；
2. HDFS集群吞吐量提升；
3. 隔离性，不同级别的应用可通过不同的Namespace进行隔离；

A single Namenode offers no isolation in a multi user environment. For example, an experimental application can overload the Namenode and slow down production critical applications. By using multiple Namenodes, different categories of applications and users can be isolated to different namespaces.

参考：

1. 官网：http://hadoop.apache.org/docs/current/hadoop-project-dist/hadoop-hdfs/Federation.html;