【发布时间】:2017-08-04 13:59:25
【问题描述】:
我想在 HDFS 中释放一些空间,所以我需要找出一些不需要/未使用的 HDFS 块/文件,并需要删除或存档。那么到目前为止,什么被认为是最佳解决方案?我正在使用 Clouder 发行版。 (我的集群 HDFS 容量是 900 TB,使用了 700 TB)
【问题讨论】:
我想在 HDFS 中释放一些空间,所以我需要找出一些不需要/未使用的 HDFS 块/文件,并需要删除或存档。那么到目前为止,什么被认为是最佳解决方案?我正在使用 Clouder 发行版。 (我的集群 HDFS 容量是 900 TB,使用了 700 TB)
【问题讨论】:
如果您运行的是 Cloudera 的许可版本,您可以使用 Cloudera Navigator 查看哪些文件在一段时间内未使用,您可以分配策略来删除它们。
如果没有,您可能正在考虑编写脚本来识别未使用的文件,并且您必须手动删除它们。
【讨论】: