具有任务数的任务可以在 celery 中运行答案

【问题标题】：task with number of task can run along that in celery具有任务数的任务可以在 celery 中运行
【发布时间】：2015-10-04 08:43:48
【问题描述】：

正如我在 celery 中看到的，它可以为一个工作人员获取多个任务，可以同时运行它们。

我需要运行一个任务，并设置可以与该任务同时运行的任务数。

因此，如果我将此数字设置为 2，并将此任务发送给具有 10 个线程的工作者， worker 只能运行另一个任务。

【问题讨论】：

【解决方案1】：

工人将为每个工人的足迹保留任务。如果你想限制worker可以同时执行的任务数量，你应该配置你的并发（例如限制1个任务，你需要worker有1个进程-c 1）。

你也可以检查prefetch配置，但它只定义了为worker的每个进程保留的任务数。

【讨论】：

有没有办法动态改变工作进程的数量？
您可以随时启动/停止其他工作人员。也可以更改工作人员的池以增加/减少特定工作人员的进程数，但我可以回答如何更好地做。你可以参考这个问题，也许会有帮助：stackoverflow.com/questions/6956272/… 还有关于工人的 Celery 文档：celery.readthedocs.org/en/latest/userguide/workers.html