LUIGI 中作业状态的持久性存储

Question

我最近开始使用 LUIGI，有几个问题我无法使用documentation回答自己

问题是关于 LUIGI 中的工作状态
使用 Luigi，我们可以设置一些全局配置 (record_task_history) 来跟踪作业历史记录，并且需要设置一个 mysql 数据库。然后可以稍后通过 luigi 可视化器检索并显示此历史记录。

1. 是否支持其他持久性存储？这可以在文本文件中完成吗？ （Visualizer 可能无法正常工作，但如果我能以编程方式获取历史状态，我可以接受）

2. luigi 何时将状态数据真正写入持久存储？它是否将其保存在内存中以运行作业并在作业完成后立即转储数据？

--学习者

Answer 1

1. 它支持 SQL Alchemy 支持的任何存储。 如果您不使用外部存储，则不会保存状态（仅日志文件）。始终根据其输出的存在来检查任务的状态。

2. 您应该检查源代码。 :D。