当面度超大规模的存储时,HDFS的namenode节点的内存可能会吃不消,所以在Hadoop 2.x版本中提供了联邦来解决这个问题

解决思路是Federation允许HDFS集群添加多个Namnode来扩展集群即一个Namenode存不下太多的元数据就让多个Namenode来存储,每个Namenode只存储一部分

逻辑结构如下

Hadoop之Federation(联邦)初体验

一个Namenode存不下的元数据被分配到多个Namenode存储

一般情况下一个namenode维护一个命名空间的一个目录

相关文章: