如何在Grafana 9.3.2中为多AWS账号创建统一Lambda错误告警

1. 整合多数据源查询逻辑 #

• 利用Grafana的**混合数据源（Mixed Data Sources）**功能，在同一面板中添加对应账号1（数据源A）、账号2（数据源B）的查询
• 为每个查询添加数据源标识：
  • 如果是CloudWatch数据源，在查询的Alias字段设置为 $lambda-name [账号A]（对应数据源A），同理数据源B设置为 $lambda-name [账号B]
  • 或者通过Grafana的**转换（Transform）**功能，给每个查询结果添加account标签，值为A/B，方便后续告警提取
• 若账号数量多，可创建数据源变量（包含所有目标数据源），通过变量遍历自动生成所有账号的查询

2. 配置统一告警规则 #

• 新建告警规则，选择上述混合查询作为数据源，确保查询结果包含lambda-name、error-rate和account（数据源标识）字段
• 设置触发条件：比如 error-rate > 0.05（根据实际需求调整阈值），并开启“针对每个时间序列触发单独告警”，保证每个出错的Lambda（无论所属账号）都能生成独立告警事件
• 配置告警评估周期，确保能及时捕获错误率异常

3. 自定义告警通知内容 #

• 进入Grafana的通知模板页面，创建自定义模板格式化告警消息：

  {{ range .Alerts }}
  {{ .Labels.lambda-name }}在账号{{ .Labels.account }}中错误率为{{ .ValueString }}
  {{ end }}
  

• 若用Alias方式标识账号，可调整模板提取Alias中的账号信息，示例：

  {{ range .Alerts }}
  {{ reReplaceAll "\\s\\[.*\\]" "" .Labels.alertname }}在账号{{ reReplaceAll "^.*\\[(.*)\\]$" "$1" .Labels.alertname }}中错误率为{{ .ValueString }}
  {{ end }}
  

• 将告警通知渠道关联该自定义模板，确保发送的告警消息符合需求格式

4. 验证与调试 #

• 手动触发某账号下Lambda的错误，检查告警是否正常触发，通知消息中的账号名称、Lambda名称、错误率是否准确
• 批量验证多账号Lambda的告警覆盖情况，确保无遗漏

内容的提问来源于stack exchange，提问作者user21536314