【问题标题】:How can I get the latest data from APScheduler through sqlalchemy?如何通过 sqlalchemy 从 APScheduler 获取最新数据?
【发布时间】:2019-02-02 09:06:24
【问题描述】:

我尝试使用 Advanced Python Scheduler 每五秒一次通过烧瓶 sqlalchemy 从我的 MySql 数据库中获取数据。

就我而言,我想通过Flask SQLAlchemy从APScheduler中获取最新修改的数据,但是在我多次更改MySql数据库中的数据后,我仍然获得了数据库中最早的数据。

似乎 APScheduler 只运行一次作业,而在接下来的时间里它只是“记住”和“复制”它所做的事情。 以下是APScheduler的相关设置。

jobstores={"default":MemoryJobStore(),}
executors={"threadpool":ThreadPoolExecutor(max_workers=20)}
job_default={
    'coalesce': True,
    'max_instances': 1,
    'replace_existing':True
}
scheduler=BackgroundScheduler(jobstores=jobstores,executors=executors,job_default=job_default)

def testJob():
    test=Test.query.filter_by(id=2).first()
    with open('test.log','a+') as f:
        s=str(datetime.now())+'  '+str(test)+'\n'
        f.writelines([s])

tmpL=[CronTrigger(minute=m,second=s) for m in range(60) for s in range(0,60,5)]
tmpL.append(DateTrigger(run_date=datetime.now()))
trigger=OrTrigger(tmpL)
job=scheduler.add_job(testJob,trigger,id="testJob",replace_existing=True)
scheduler.start()

在我的测试中,我的表首先包含数据“cat 4”,然后我将其更改为“dog 3”、“orange 7”等。我什至删除了那行数据。但我只能每五秒得到一次“Test 2:cat->4”。

enter image description here

如何通过 sqlalchemy 从 APScheduler 获取最新数据?

【问题讨论】:

    标签: python sqlalchemy apscheduler


    【解决方案1】:

    您的调度程序可能使用单个线程来运行作业,因为它们非常罕见。从Test.query 看来,您可能正在使用 Flask-SQLAlchemy,它默认使用作用域会话,或者换句话说是线程本地会话。您的工作也不会结束由查询隐式启动的事务。这些与使用默认为REPEATABLE READ 事务隔离级别的 MySQL 相结合,导致作业共享相同的事务,因此从数据库的相同快照中读取。只需及时结束您的交易:

    def testJob():
        test=Test.query.filter_by(id=2).first()
        db.session.rollback()
        ...
    

    【讨论】:

    • 我确实在调度程序中使用了 Flask-SqlAlchemy。您建议的方法非常好,解决了我的问题,非常感谢!
    猜你喜欢
    • 1970-01-01
    • 2021-10-01
    • 2020-06-21
    • 1970-01-01
    • 2022-06-11
    • 1970-01-01
    • 2021-11-05
    • 1970-01-01
    • 2020-11-14
    相关资源
    最近更新 更多