错误状态卡住的 Kubernetes Pod 正在终止

Question

我有一个由 Stateful Set 创建的 Kubernetes Pod（不确定这是否重要）。这个 pod 中有两个容器。当两个容器之一发生故障并使用get pods 命令时，1/2 容器处于就绪状态，状态为“错误”。第二个容器从不尝试重新启动，我无法销毁 pod，除非使用 --grace-period=0 --force 标志。典型的删除使 pod 永远或很长时间处于“终止”状态。什么可能导致这种行为以及如何进行调试？

Answer 1

我在我的 k8s 1.6 集群 esp 的一个节点上遇到了类似的问题。当节点已经运行了几个星期时。它可能发生在任何节点上。发生这种情况时，我在节点上重新启动 kubelet，错误就消失了。

这不是最好的做法，但它总能解决问题。如果您重新启动 kubelet 也不会对集群造成损害，因为正在运行的 pod 会继续保持运行。

kubectl get po -o wide 可能会告诉您错误的 pod 正在一个节点上运行。 SSH 到该节点并重新启动 kubelet。