Kubernetes 中有状态应用程序的优雅缩减

Question

我在 Kubernetes 集群中部署了一个有状态的应用程序。现在的挑战是我如何以优雅的方式缩减集群，以便每个 pod 在终止时（在缩减期间）完成它的待处理任务，然后优雅地关闭。该场景类似于下面解释的场景，但在我的情况下，终止的 pod 将有很少的飞行任务需要处理。

https://medium.com/@marko.luksa/graceful-scaledown-of-stateful-apps-in-kubernetes-2205fc556ba91

我们是否有来自 kubernetes api 的官方功能支持。

Kubernetes version: v1.11.0

Host OS: linux/amd64

CRI version: Docker 1.13.1

更新：

可能的解决方案 - 在执行 statefulset 缩减时，终止 pod(s) 的 preStop 挂钩将向队列发送消息通知，其中包含相应的元数据详细信息。待完成的任务。之后使用 K8 Job 完成任务。如果从 K8 的角度来看同样是推荐的方法，请发表评论。

提前致谢！

问候， 巴鲁

Answer 1

只有在进行中的作业完成后，您的 pod 才会缩小。您可以在部署清单中使用prestop 属性另外配置生命周期，这将优雅地停止您的应用程序。这是要遵循的最佳实践之一。详细解释和语法请参考this。

更新答案

这是我尝试在本地部署并尝试生成负载以提高 cpu 利用率并触发 hpa 的 yaml。

部署.yaml

kind: Deployment
apiVersion: apps/v1
metadata:
  namespace: default
  name: whoami
  labels:
    app: whoami
spec:
  replicas: 1
  selector:
    matchLabels:
      app: whoami
  template:
    metadata:
      labels:
        app: whoami
    spec:
      containers:
        - name: whoami
          image: containous/whoami
          resources:
            requests:
              cpu: 30m
            limits:
              cpu: 40m
          ports:
            - name: web
              containerPort: 80
          lifecycle:
            preStop:
              exec:
                command:
                  - /bin/sh
                  - echo "Starting Sleep"; date; sleep 600; echo "Pod will be terminated now"
---
apiVersion: autoscaling/v2beta1
kind: HorizontalPodAutoscaler
metadata:
  name: whoami
spec:
  scaleTargetRef:
    apiVersion: apps/v1
    kind: Deployment
    name: whoami
  minReplicas: 1
  maxReplicas: 3
  metrics:
    - type: Resource
      resource:
        name: cpu
        targetAverageUtilization: 40
#    - type: Resource
#      resource:
#        name: memory
#        targetAverageUtilization: 10
---
apiVersion: v1
kind: Service
metadata:
  name: whoami-service
spec:
  ports:
    - port: 80
      targetPort: 80
      protocol: TCP
      name: http
  selector:
    app: whoami

部署 pod 后，执行以下命令将生成负载。

kubectl run -i --tty load-generator --image=busybox /bin/sh

while true; do wget -q -O- http://whoami-service.default.svc.cluster.local; done

创建副本后，我停止了加载，Pod 在 600 秒后终止。这种情况对我有用。我相信这也是 statefulset 的类似情况。希望这会有所帮助。