Kafka 日志压缩主题分区和磁盘空间

Question

当日志压缩主题分区在其所在的物理磁盘上空间不足时，我无法找到有关 Kafka 如何处理这种情况的信息。

在这种情况下，Kafka 代理（以及所有数据）会生存还是失败？

Answer 1

与任何其他操作系统进程一样，Kafka 会说由于空间不足而无法打开文件。

Kafka 代理和其他操作系统进程将开始停止和/或出错。

您需要监控磁盘卷至少达到 80% 的阈值，具体取决于增加的速度。如果达到 90% 以上，您可能需要让代理离线以添加更多存储或添加更多代理并自己重新分配一些分区

一些监控工具甚至允许您使用线性回归来预测何时达到容量。