【发布时间】:2013-02-25 08:00:05
【问题描述】:
我知道 HDFS 在数据节点中使用常规的 linux 文件系统存储数据。我的 HDFS 块大小是128 MB。假设我的hadoop集群中有10 GB的磁盘空间,这意味着HDFS最初有80 blocks作为可用存储。
如果我创建一个 12.8 MB 的小文件,#available HDFS 块将变为 79。如果我创建另一个 12.8 MB 的小文件会发生什么? #availbale 块会保持在 79 还是会下降到 78?在前一种情况下,HDFS 基本上在每次分配块后根据可用的可用磁盘空间重新计算#available 块,因此,只有在消耗超过 128 MB 的磁盘空间后,#available 块才会变为 78。请澄清。
【问题讨论】: