如何为Grafana Mimir中所有告警添加统一标签？

当然可以实现，针对你用Helm部署的Mimir栈，有以下几种可行方案：

方案一：通过Helm配置Mimir Ruler组件添加全局标签 #

Mimir的告警规则由Ruler组件管理，你可以直接在Helm values中配置Ruler的全局外部标签，所有由Ruler生成的告警都会自动带上该标签：

在你的Mimir Helm values文件中添加或修改以下配置：

ruler:
  config:
    ruler.yaml:
      global:
        external_labels:
          env: prod

然后执行Helm升级命令使配置生效：

helm upgrade mimir grafana/mimir -n <你的命名空间> -f <values文件路径>

方案二：在Grafana Agent配置中添加全局外部标签 #

如果你的告警规则是通过Grafana Agent推送到Mimir的，可以直接在Agent的Prometheus配置中添加全局外部标签，所有由该Agent处理的时间序列和告警规则都会带上标签：

修改Grafana Agent的Helm values：

prometheus:
  configs:
    - name: main
      # 其他配置保持不变
      external_labels:
        env: prod
      remote_write:
        - url: http://<mimir服务地址>/api/v1/push

同样执行Helm升级更新Agent部署：

helm upgrade grafana-agent grafana/grafana-agent -n <你的命名空间> -f <values文件路径>

方案三：批量更新已导入的告警规则（可选） #

如果已经导入了大量告警规则，且不想重新推送，可以通过Mimir的Ruler API批量给规则组添加标签。比如使用curl调用API修改规则组：

curl -X PUT http://<mimir服务地址>/api/v1/ruler/<租户ID>/rules/<规则组名称> \
  -H "Content-Type: application/yaml" \
  --data-binary @- << EOF
groups:
- name: <规则组名称>
  labels:
    env: prod
  rules:
  # 原有的规则内容
EOF

注意：这个方法需要逐个处理规则组，适合少量规则的场景，300条告警建议优先用前两种方案。

内容的提问来源于stack exchange，提问作者Gavin Woolley