【问题标题】:Does HDFS Disk Usage reflect usage of local hard drive space on my PC?HDFS 磁盘使用情况是否反映了我 PC 上本地硬盘空间的使用情况?
【发布时间】:2019-10-08 12:07:59
【问题描述】:

我在 virtualbox 中运行 Hortonworks Hadoop,当我转到 Ambari 仪表板时,它显示 HDFS 磁盘使用率为 46%(在可用的 42GB 中使用了 19.4GB)。我很好奇我分配给 Hortonworks Sandbox 的这些 42GB 是从我的 PC 的本地硬盘驱动器中取出的吗?

我很困惑,因为当我查看我的 PC 的存储分配时(见下面的截图),最多的是“系统和保留”,它只占 36GB,比我分配给 Hortonworks Sandbox 的 42GB 还少。所以谁能告诉我:1)我分配给 Hortonworks Sandbox 的 42GB 是从我的本地硬盘驱动器中取出的吗? 2) 我在下面附上的存储使用屏幕截图中反映了这 42GB 的位置? 3) Ambari 显示 HDFS 使用了 19.4GB。我怎样才能知道这些 19.4GB 被分配到哪里?

【问题讨论】:

    标签: hadoop hdfs virtual-machine diskspace


    【解决方案1】:

    VirtualBox 硬盘驱动器在它向 VM 报告的主机上具有特定的最大大小,但它是被压缩的,否则是为了节省主机上的空间

    【讨论】:

    • 谢谢,@cricket_007。有没有办法检查这些 19.4GB 被分配到哪里(即在哪个数据节点上)?
    • 它不在数据节点上。它是 VM 的操作系统(包括 NameNode、DataNode 和 HDP VM 的其他部分,如 Spark、HBase、Hive 等)
    猜你喜欢
    • 1970-01-01
    • 2021-10-07
    • 1970-01-01
    • 2018-06-30
    • 2016-05-28
    • 1970-01-01
    • 1970-01-01
    • 2015-10-30
    • 1970-01-01
    相关资源
    最近更新 更多