【问题标题】:Size of the NAMENODE and DATANODE in hadoophadoop中NAMENODE和DATANODE的大小
【发布时间】:2014-07-24 14:57:33
【问题描述】:

NAMENODE 和 DATANODE 的大小是多少,无论块和数据节点在 hadoop 中是否不同

如果输入文件是 200mb 大小,那么将创建多少个数据节点以及将创建多少个块。

【问题讨论】:

  • 您在这里缺少 hadoop 基础知识。请阅读“hadoop 权威指南”和“hadoop 操作”书籍,以清楚了解 hadoop 是什么并熟悉术语
  • 我认为你的问题标题根本不合适。

标签: hadoop bigdata


【解决方案1】:

NameNode、SecondaryNameNode、JobTracker、DataNode 是 hadoop 集群中的组件。 块是数据在 HDFS 上的存储方式。

Datanode 可以简单地看成是一个网络上带有内存和处理器的硬盘(大量内存 - TB)。

就像您可以在硬盘上存储许多文件一样,您也可以这样做。

现在如果你想在 Hadoop 上存储一个 200mb 的文件-

v1.0系统或更低版本,会被分成4个64mb大小的block

v2.0 系统或更高版本,它将被分成 2 个 128mb 大小的块

在这个小小的解释之后,我会回复@charles_Babbage 的建议,从 youtube 上的书籍或教程开始。

【讨论】:

  • 非常感谢您提供的信息。我所理解的
猜你喜欢
  • 1970-01-01
  • 1970-01-01
  • 2015-03-26
  • 2023-03-24
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2015-09-04
  • 1970-01-01
相关资源
最近更新 更多