Helm部署Prometheus配置Alertmanager external_labels启动报错如何解决

问题根因 #

你的配置放错了所属组件的配置节点：

• external_labels是Prometheus服务自身的全局配置项，不属于Alertmanager的配置字段，Alertmanager的global配置段本身就不支持该字段，这是触发yaml解析报错的直接原因。
• 你参考的是Prometheus官方的配置规范，但误将Prometheus的配置项写入了Alertmanager的配置文件，两个组件的配置字段不通用。
• 你的需求是给发往Alertmanager的时间序列加标识标签，该配置本身就应该在Prometheus侧配置，不需要修改Alertmanager的配置。

修复步骤 #

1. 删除你之前在alertmanagerFiles.alertmanager.yml.global下添加的external_labels相关配置
2. 在values.yaml中按照Prometheus Helm Chart的规范添加对应配置，正确结构如下：

server:
  global:
    external_labels:
      environment: 'perf'

3. 重新执行升级命令即可：
   helm upgrade --install prometheus .

验证方法 #

部署完成后，访问Prometheus UI，进入Status -> Configuration页面，即可看到全局配置中已添加的external_labels，后续Prometheus发往Alertmanager的告警、以及联邦/远程存储的时间序列都会自动携带该标签。

内容的提问来源于stack exchange，提问作者Swaps