这是模拟一个300M的文件在HDFS上传的过程

个人对于HDFS的上传以及合并的理解
在长时间的运行后NameNode内存里的edit-logs文件变的很大,如果此时NameNode挂掉了那么内存里的fsimage文件会丢失,导致很大的损失。

SencondaryNameNode定期(时间可以调整)和定量(edits的大小到一定值)进行checkpoint操作,在NameNode下载edits和fsimage合并后生成新的fsimage替换掉NameNode里的旧的fsimage。
个人对于HDFS的上传以及合并的理解

相关文章:

  • 2021-08-27
  • 2021-10-22
  • 2022-12-23
  • 2021-06-13
  • 2021-06-21
  • 2021-09-20
  • 2021-09-01
  • 2022-12-23
猜你喜欢
  • 2021-06-08
  • 2021-09-04
  • 2021-11-25
  • 2022-12-23
  • 2021-08-24
  • 2022-01-20
  • 2021-11-29
相关资源
相似解决方案