通过Terraform部署的Prometheus Helm Values无法加载file_sd_configs指定文件

我正遵循AWS官方指南，通过JMX Exporter让Prometheus抓取MSK集群的指标。教程提到需创建targets.json文件并填充值，通过以下配置加载该文件：

- job_name: 'broker'
    file_sd_configs:
    - files:
      - 'targets.json'

我的Prometheus values文件当前配置如下，但似乎无法将targets.json加载到Prometheus配置中：

extraScrapeConfigs: |
  - job_name: broker
    file_sd_configs:
    - files:
      - targets.json

是否需要通过插值操作让Terraform识别这个外部文件？指定绝对文件路径也不起作用。

解决方案 #

1. 确保文件被正确挂载到Prometheus容器 #

直接写文件名或宿主机绝对路径没用，因为Prometheus容器无法访问宿主机文件系统。如果用Terraform+Helm部署Prometheus，需要通过挂载方式让容器能读取到targets.json：

• 先通过Terraform创建包含targets.json内容的ConfigMap：

resource "kubernetes_config_map" "msk_targets" {
  metadata {
    name      = "msk-targets"
    namespace = "monitoring"
  }

  data = {
    "targets.json" = file("${path.module}/targets.json")
  }
}

• 然后在Helm values中配置挂载：

extraVolumes:
  - name: msk-targets
    configMap:
      name: msk-targets

extraVolumeMounts:
  - name: msk-targets
    mountPath: /etc/prometheus/msk-targets
    readOnly: true

extraScrapeConfigs: |
  - job_name: broker
    file_sd_configs:
    - files:
      - /etc/prometheus/msk-targets/targets.json

2. 直接注入文件内容（无需挂载） #

如果不想处理挂载逻辑，可通过Terraform的file函数把targets.json内容直接嵌入到Prometheus配置里，替代文件路径：

resource "helm_release" "prometheus" {
  name       = "prometheus"
  repository = "https://prometheus-community.github.io/helm-charts"
  chart      = "prometheus"
  namespace  = "monitoring"

  set {
    name  = "extraScrapeConfigs"
    value = <<EOF
- job_name: broker
  file_sd_configs:
  - contents: |
      ${file("${path.module}/targets.json")}
EOF
  }
}

3. 排查日志定位问题 #

如果以上方法都无效，查看Prometheus容器日志，搜索file_sd关键词，通常能找到文件不存在、权限不足等具体错误信息，针对性解决。

内容的提问来源于stack exchange，提问作者Gonzalo