【发布时间】:2021-07-12 03:32:30
【问题描述】:
我有一个将数据插入 SQL Server 数据库的 DAG。有些任务需要 24 小时以上才能运行,因为它插入的数据库性能不高。
如果任务运行时间超过 24 小时,我需要将它们自动标记为完成,因为我需要从它们继续,以便开始插入接下来几天的数据(DAG 每天运行,数据源每天都有新数据进来)。如何以编程方式执行此操作,而无需进入 UI 将其标记为“成功”或“失败”?
【问题讨论】:
-
您使用的是哪个版本的气流?
-
@cluis92 您可以直接对 Airflow 的元数据数据库进行 sql 查询:stackoverflow.com/questions/40315171/…
标签: airflow