如何为Grafana Alertmanager配置告警恢复滞后阈值？

完全可以实现你要的需求——让温度超过32℃触发告警，只有降到31.5℃才发送恢复通知。Grafana的统一告警系统（Unified Alerting）支持直接配置自定义恢复条件，不用折腾Alertmanager的复杂设置，具体步骤如下：

1. 编辑温度告警规则 #

打开Grafana的告警规则页面，找到你的实验室温度告警，点击编辑按钮。

2. 设置触发条件 #

在「查询」标签页，保持触发表达式不变：

lab_temperature > 32

建议给触发条件加个For时长（比如1分钟），避免温度瞬间跳变误触发告警。

3. 配置自定义恢复条件 #

切换到「告警行为」标签页，找到「恢复条件」区域：

• 勾选「自定义恢复条件」选项
• 输入恢复表达式：

lab_temperature < 31.5

同样可以给恢复条件设置For时长（比如1分钟），确保温度稳定低于31.5℃才发恢复通知，避免小幅波动导致反复恢复。

旧版Grafana的替代方案 #

如果你的Grafana版本不支持单独的恢复条件，可以直接在PromQL表达式里整合滞回逻辑，利用Prometheus的ALERTS指标跟踪告警状态：

# 触发告警：温度>32℃，且之前未处于告警状态
(lab_temperature > 32) and (last_over_time(ALERTS{alertname="LabTemperatureAlert"}[10m]) == 0 or absent(ALERTS{alertname="LabTemperatureAlert"}))
# 控制恢复：只有温度<31.5℃时才允许恢复
or (lab_temperature < 31.5 and last_over_time(ALERTS{alertname="LabTemperatureAlert"}[10m]) == 1)

不过这种方式不如直接用自定义恢复条件直观，优先推荐用Grafana的内置功能。

注意事项 #

• For时长的设置要根据你的温度波动情况调整，平衡灵敏度和误报率。
• 修改后记得测试：可以通过模拟温度数据（比如用Prometheus Pushgateway发测试值），确认告警和恢复的触发时机符合预期。

内容的提问来源于stack exchange，提问作者IShafigh