将 KEDA 与 Azure 函数队列一起使用时 Pod 突然终止

Question

我正在使用 KEDA 自动扩展我的 ML Workload pod。当队列缩小时，即使 Pod 仍在处理队列工作负载，Pod 也会根据队列项目的数量自动扩展。我已经设置了 TerminationGracePeriodSeconds，但对于我们的工作量来说要么太高要么太低。

了解 SIGTERM 信号和 prestop，但找不到任何可以使用 KEDA queue helm chart 解决此问题的示例

Answer 1

我们通过在 deployment.YAML 中增加 terminationGracePeriodSeconds 来解决此问题。这可能不是正确的解决方法，但它对我们有用。希望对遇到同样问题的人有所帮助。

apiVersion: extensions/v1beta1
kind: Deployment
metadata:
    name: test
spec:
    replicas: 1
    template:
        spec:
            containers:
              - name: test
                image: ...
            terminationGracePeriodSeconds: 300

如果您使用的是函数应用程序，请同时减小批处理大小，这样 pod 就不会在更长的时间内赶上处理。