重试一定次数后如何使（cron）作业失败？

Question

我们设置了一个 Kubernetes 集群，其中包含网络抓取 cron 作业。一切似乎都很顺利，直到 cron 作业开始失败（例如，当站点结构发生变化并且我们的爬虫不再工作时）。看起来偶尔会有一些失败的 cron 作业会继续重试，直到它导致我们的集群崩溃。运行 kubectl get cronjobs（在集群故障之前）将显示为失败的作业运行的作业过多。

我已尝试按照here 中描述的关于 Pod 退避失败策略的已知问题的说明进行操作；但是，这似乎不起作用。

这是我们的配置供参考：

apiVersion: batch/v1beta1
kind: CronJob
metadata:
  name: scrape-al
spec:
  schedule: '*/15 * * * *'
  concurrencyPolicy: Allow
  failedJobsHistoryLimit: 0
  successfulJobsHistoryLimit: 0
  jobTemplate:
    metadata:
      labels:
        app: scrape
        scrape: al
    spec:
      template:
        spec:
          containers:
            - name: scrape-al
              image: 'govhawk/openstates:1.3.1-beta'
              command:
                - /opt/openstates/openstates/pupa-scrape.sh
              args:
                - al bills --scrape
          restartPolicy: Never
      backoffLimit: 3

理想情况下，我们希望 cron 作业在 N 次重试后终止（例如，在 my-cron-job 失败 5 次后，类似 kubectl delete cronjob my-cron-job 的东西）。任何想法或建议将不胜感激。谢谢！

Answer 1

您可以使用backoffLimit 告诉您的作业停止重试。

指定在将此作业标记为失败之前的重试次数。

你的情况

spec:
  template:
    spec:
      containers:
        - name: scrape-al
          image: 'govhawk/openstates:1.3.1-beta'
          command:
            - /opt/openstates/openstates/pupa-scrape.sh
          args:
            - al bills --scrape
      restartPolicy: Never
  backoffLimit: 3

您将 3 设置为工作的backoffLimit。这意味着当 CronJob 创建作业时，如果失败，它将重试 3 次。这控制 Job，而不是 CronJob

当 Job 失败时，将再次创建另一个 Job 作为您的预定时间段。

你想要： 如果我没记错的话，当您计划的作业失败 5 次时，您想停止安排新的作业。对吧？

答案： 在这种情况下，这是不可能自动实现的。

可能的解决方案： 您需要suspend CronJob 才能停止安排新作业。

Suspend: true

您可以手动执行此操作。如果您不想手动执行此操作，则需要设置一个观察者，它将观察您的 CronJob 状态，并在必要时更新 CronJob 以暂停。