如何降低GCP Stackdriver告警噪音 已认领告警调低通知频率咨询
GCP Stackdriver 告警噪音抑制解决方案
以下是可直接落地的配置方案,覆盖告警认领后降频/停推的需求:
- 基础间隔调整:首先修改现有告警策略的重复通知间隔,默认10分钟的配置可先全局调整为1小时打底,操作路径为Cloud Monitoring控制台→对应告警策略→编辑「通知」设置→修改「重复通知频率」参数即可。
- 手动认领静默配置:针对已触发的告警事件,认领时可直接在告警详情页设置自定义静默时长,比如设置3小时静默,则接下来3小时内该告警不会重复推送通知,到期后若故障仍未恢复才会重新推送;也可以选择静默到手动解除,等问题修复后再关闭静默,即可实现仅故障恢复时推送一次通知的效果。
- 自动化静默集成:如果团队使用工单系统流转故障,可通过Cloud Function实现自动静默:配置告警触发后同步推送到工单系统,工单被分配(即完成认领)时自动调用Cloud Monitoring的
projects.alertPoliciesAPI给对应告警实例添加静默规则,工单关闭(故障修复)时自动解除静默并触发恢复通知,全程无需人工操作控制台。 - 分级降噪补充:建议同步给所有告警做优先级划分,P1级核心故障保留高频通知,P2、P3级非核心故障默认配置长推送间隔,从源头减少非必要告警推送。
内容的提问来源于stack exchange,提问作者SRaj
相关产品推荐
相关产品推荐

