【问题标题】:How to run a function periodically with Flask and Celery?如何使用 Flask 和 Celery 定期运行函数?
【发布时间】:2015-02-27 09:37:10
【问题描述】:

我有一个烧瓶应用程序,大致如下所示:

app = Flask(__name__)
@app.route('/',methods=['POST'])
def foo():
   data = json.loads(request.data)
   # do some stuff

   return "OK"

现在,我还想从该脚本中每十秒运行一次函数。我不想为此使用睡眠。我还有以下芹菜脚本:

from celery import Celery
from datetime import timedelta
celery = Celery('__name__')

CELERYBEAT_SCHEDULE = {
    'add-every-30-seconds': {
        'task': 'tasks.add',
        'schedule': timedelta(seconds=10)
    },
}



@celery.task(name='tasks.add')
def hello():
    app.logger.info('run my function')

脚本运行良好,但 logger.info 未执行。我错过了什么?

【问题讨论】:

    标签: python flask celery


    【解决方案1】:

    你有 Celery worker 和 Celery beat 跑步吗?计划任务由 beat 处理,它在适当的时候将提到的任务排入队列。 Worker 然后实际处理数字并执行您的任务。

    celery worker --app myproject--loglevel=info
    celery beat --app myproject
    

    但是,您的任务看起来像是在调用 Flask 应用程序的记录器。使用 worker 时,您可能没有 Flask 应用程序(因为它在另一个进程中)。尝试使用普通的 Python 记录器来执行演示任务。

    【讨论】:

    • 难道不能在flask应用里面运行celery任务吗?
    • Celery 在这种情况下可能不是您想要的。查看APScheduler 以获得更简单的实现。
    【解决方案2】:

    嗯,celery beat 也可以嵌入到普通的 celery worker 中,在你的命令中使用 -B 参数。

    celery -A --app myproject --loglevel=info -B

    仅推荐用于开发环境。对于生产,您应该像 documentation 提到的那样分别运行 beat 和 celery workers。否则,您的周期性任务将运行多次。

    【讨论】:

    • 应该标记为正确答案,至少在 2020 年 6 月
    【解决方案3】:

    默认情况下,celery 任务将在 Flask 应用程序上下文之外运行,因此它无法访问 Flask 应用程序实例。但是,在运行任务时使用 Flask 应用对象的 app_context 方法很容易创建 Flask 应用上下文。

    app = Flask(__name__)
    celery = Celery(app.name)
    
    @celery.task
    def task():
        with app.app_context():
            app.logger.info('running my task')
    

    This article by Miguel Grinberg 是一个很好的地方,可以了解在 Flask 应用程序中使用 Celery 的基础知识。

    【讨论】:

      猜你喜欢
      • 2012-05-09
      • 2015-12-01
      • 2021-06-15
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2018-07-28
      • 2012-10-05
      • 2019-10-04
      相关资源
      最近更新 更多