【问题标题】:Do we have to format datanode for HDFS file system or we only need to format namenode我们是否必须为 HDFS 文件系统格式化 datanode 或者我们只需要格式化 namenode
【发布时间】:2019-06-08 17:30:12
【问题描述】:

在设置伪集群或全集群时,我们是否需要格式化数据节点来安装HDFS文件系统,或者我们只需要格式化namenode。

我问这个是因为,我在很多博客上都读到过,HDFS 将数据按顺序存储在硬盘上,它是一个抽象层,将数据存储在大块上,而不是默认的块大小存储提供的主机文件系统。

如果我们不格式化数据节点,那么 HDFS 的强大功能就会被折腾。

【问题讨论】:

    标签: hadoop hdfs namenode datanode


    【解决方案1】:

    格式化和挂载硬盘与格式化 HDFS 没有直接关系。从概念上讲,“格式化”的概念是相同的。但这两个任务完全分开,没有直接关系。

    hadoop format 命令不会格式化或挂载硬盘。硬盘驱动器应该已经格式化和安装。当您为 HDFS 运行 format 命令时,它正在准备 NameNode fsimage 文件,以便它知道所有存储块在数据磁盘上的位置。

    【讨论】:

    • 感谢您的回复。
    • 如果你同意这个,你可以接受答案,它也会帮助其他人。
    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 2012-09-14
    • 2021-12-25
    • 2015-09-15
    • 2017-01-01
    • 2014-11-08
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多