每隔几分钟在 linux 机器上运行一个 python 脚本，前提是它还没有运行

Question

我有一个必须每 3 分钟运行一次的 python 脚本。脚本运行一个进程虽然可以运行超过 10 分钟。因此我需要确保如果它已经在运行它不应该运行。我需要在没有任何数据库干扰的情况下执行此操作。 我使用的方法是通过 crontab 中的以下命令创建一个 cron。

*/3 * * * * sudo ps aux|grep -v grep|grep "python XMLProcessor.py"
|| cd /home/ubuntu/git/perpule-python-subscriber; sudo python XMLProcessor.py

运行流畅。但这里的问题是，有时，即使在进程结束后，命令 sudo ps aux|grep -v grep|grep "python XMLProcessor.py" 仍然会给出输出，因此python 脚本不运行。

请建议我一种更好的方法或纠正我正在使用的方法。感谢所有建议。

Answer 1

您使用的方法存在一些问题，因为 ps 可以报告“意外情况”。你确定你的python程序有一个唯一的名字吗？会不会有竞态条件（可以运行两次）？

执行此操作的典型方法是在进程开始时触摸文件，然后将其删除并结束：

if [ ! -f .working ]; then touch .working && \ python do_something.py && \ rm .working fi

然后您可以通过检查该文件来检查它是否正常工作。但是，这种方法存在多个问题：如果进程崩溃会发生什么？你应该删除触摸的文件吗？是否可以在每次可能的崩溃时将其删除？然后你需要添加超时，它开始变得复杂。

然后，正确且更安全的解决方案是使用某种服务器或工具来检查您的作业是否正在运行，如果没有，则运行它。我用luigi 做了类似的事情，它与python代码集成得很好，所以你可以试一试。