在HDFS写数据的过程中,NameNode会选择距离待上传数据最近距离的Datanode接收数据。那么这个最小距离怎么计算的呢?

节点距离:两个节点到达最近共同祖先的距离总和。

集群网络拓扑

机架感知(副本存储节点选择)

  • 第一个副本在Client所处的节点上。如果客户端在集群外,随机选一个。
  • 第二个副本一般保存在同机架的不同节点
  • 第三个副本一般保存在不同机架
    不会跨数据中心

相关文章:

  • 2021-11-05
  • 2021-11-27
  • 2021-12-13
猜你喜欢
  • 2021-09-30
  • 2021-12-03
  • 2021-12-03
相关资源
相似解决方案