如何通过Azure Pipelines透明自动化Azure Monitor日志、指标类告警并便捷更新阈值

1. 核心逻辑 #

用声明式基础设施即代码(IaC)定义所有告警规则，所有可变配置全部抽离为独立参数，全程变更可追溯、可预览，既满足透明化要求，也能实现阈值快速更新和全流程自动化。

2. 具体实现步骤 #

2.1 编写告警规则IaC模板 #

优先选Bicep（更易读）或ARM模板定义两类告警资源，所有可变配置不要硬编码，全部抽成参数：

• 指标告警对应Azure资源类型 Microsoft.Insights/metricAlerts
• 日志搜索告警对应Azure资源类型 Microsoft.Insights/scheduledQueryRules
  可配置的参数包括但不限于：告警作用域、阈值、评估窗口长度、评估频率、触发条件、绑定的动作组ID、日志查询语句（针对日志告警）
  以下是参数文件示例片段：

{
  "$schema": "https://schema.management.azure.com/schemas/2019-04-01/deploymentParameters.json#",
  "contentVersion": "1.0.0.0",
  "parameters": {
    "cpuUsageAlertThreshold": {
      "value": 80
    },
    "errorLogCountThreshold": {
      "value": 10
    },
    "errorLogQuery": {
      "value": "AppException | where SeverityLevel >= 3 | summarize TotalCount = count()"
    },
    "notifyActionGroupId": {
      "value": "/subscriptions/[订阅ID]/resourceGroups/[资源组名]/providers/microsoft.insights/actionGroups/[动作组名]"
    }
  }
}

2.2 配置Azure Pipelines流水线 #

流水线分为三个固定阶段，全程无需人工操作，也可根据需要加人工审核节点：

• 校验阶段：执行az deployment group validate命令校验模板和参数的语法、权限问题，提前拦截错误
• 预览阶段：执行az deployment group what-if命令输出本次部署的所有变更内容，比如哪条告警的阈值从70调整为80，所有变更透明可查
• 部署阶段：执行az deployment group create命令将告警规则正式部署到对应Azure环境
  如果是多环境部署（开发/测试/生产），可以对应维护多套参数文件，不同环境的告警阈值、通知规则可以单独配置，互不干扰。

3. 阈值更新流程 #

需要调整告警阈值时，仅需要修改对应参数文件里的阈值字段，提交代码到代码仓库就会自动触发流水线运行，自动完成校验、预览、部署全流程，所有变更有git提交记录可追溯，修改人、修改内容、生效时间全部可查，完全满足透明化要求。

4. 可选优化点 #

• 给代码仓库加分支策略，修改参数文件必须走PR，至少1人审核后才能合并，避免误改阈值
• 把通用告警规则封装成Bicep模块，不同业务线复用的时候直接引用模块传参即可，无需重复编写模板

内容的提问来源于stack exchange，提问作者Vowneee