是否可以为任何不健康的 Prometheus Consul 目标创建 Grafana 警报？

Question

Prometheus 可以设置为收集 Consul 目标的指标。

Prometheus 的 Targets 页面显示已配置目标的概览，包括健康/总目标数的计数（在下面的示例中，有 20 个健康目标和 22 个总目标）

有什么方法可以在 Grafana 中创建警报以在并非所有目标都健康时触发？在下面的示例中，应该触发警报，因为并非所有 22 个目标都已启动。

我找到了包含目标总数的prometheus_sd_discovered_targets，但似乎没有公开健康目标数量的指标。

Answer 1

正如 Raven 所指出的，up 指标可用于此目的。

来自the docs：

对于每个实例抓取，Prometheus 将样本存储在以下时间序列中：

up{job="<job-name>", instance="<instance-id>"}: 1 if the instance is healthy, i.e. reachable, or 0 if the scrape failed.

up 时间序列对于实例可用性监控很有用。

像up < 1 这样的 Prometheus 查询会为您提供当前不健康的目标。

您可以从中创建带有参数的 Grafana 警报

• when last() of query (A, 5m, now) is above -1
• If no data or all values are null set state to Ok