通过 slack 的气流调度程序失败通知答案

【问题标题】：Airflow scheduler failure notification via slack通过 slack 的气流调度程序失败通知
【发布时间】：2021-10-13 12:43:04
【问题描述】：

我是气流的新手，所以请原谅我对它所做的任何愚蠢假设，我在工作中设置了 ETL，我在公司集群上运行 Airflow，并且其中有一些任务。运行气流的集群可能会崩溃，在这种情况下 DAG 将不会运行。

我想检查我们是否可以设置气流调度程序失败的通知，我的在线阅读已经抛出了几篇有用的文章来监控 DAG 本身，但是如果调度程序失败，那么这些失败通知将不会被触发（正确如果这不是它的工作原理，我会这样做）

如果您面对防火墙并且没有订阅，请以隐身方式打开以下链接

【问题讨论】：

【解决方案1】：

您必须为此使用外部软件，例如 Datadog。

基本上，您必须通过 statsD 将外部 Datadog 连接到 Airflow。

就我而言，我通过 docker-compose 部署了 Airflow，而 Datadog 是另一个容器（来自 Datadog 官方 Docker 镜像），链接到调度程序和 webserver 容器。

【讨论】：