AWS ECS中Prometheus配置文件prometheus.yml未更新问题求助

问题根源 #

ECS上Prometheus加载默认配置而非自定义配置，核心原因是：

• 本地环境中，Prometheus容器通过volumes: - ./etc/prometheus:/etc/prometheus挂载了本地的自定义配置目录，所以能读取到你的prometheus.yml；
• 但在ECS部署时，这个本地目录挂载无法直接生效——ECS容器实例上不存在你本地的./etc/prometheus目录，Prometheus启动时找不到自定义配置，就会加载默认的prometheus.yml。

另外，你的Dockerfile中把prometheus.yml复制到/etc/prometheus/prometheus.yml的操作完全无效：这个操作是在area51-tracker镜像中执行的，而Prometheus服务用的是官方prom/prometheus镜像，两者没有关联。

额外的网络问题提示 #

你本地配置中用的host.docker.internal在ECS环境下无法正常解析服务，因为ECS的网络模型和本地Docker不同。建议将prometheus.yml中的targets改为Docker服务名称（同一网络内可直接解析）：

# 修改后的prometheus.yml
global:
  scrape_interval:     15s

scrape_configs:
  - job_name: 'prometheus'
    scrape_interval: 5s
    static_configs:
      - targets: ['prometheus:9090']  # 用Prometheus服务名代替host.docker.internal
  - job_name: 'alienboard-web'
    scrape_interval: 10s
    static_configs:
      - targets: ['area51-tracker:5000']  # 用Web服务名代替host.docker.internal

解决方案 #

方案一：将自定义配置打包进Prometheus镜像（推荐）

这种方式让Prometheus镜像自带你的配置，部署到ECS时无需额外处理挂载，最稳定：

1. 在项目根目录下创建prometheus子目录，新建Dockerfile：

FROM prom/prometheus:v2.38.0
# 复制自定义配置到容器内的Prometheus配置目录
COPY ../etc/prometheus/prometheus.yml /etc/prometheus/prometheus.yml

2. 修改docker-compose.yml中Prometheus服务的配置，替换为构建自定义镜像：

prometheus:
  build: ./prometheus  # 指向刚才创建的prometheus目录
  container_name: prometheus
  networks:  # 移除network_mode: bridge，改用自定义的back-end网络，才能用服务名解析
    - back-end
  ports:
    - "9090:9090"
  volumes:
    - prometheus-data:/prometheus  # 保留数据卷，移除本地配置目录挂载
  restart: unless-stopped
  command:
    - "--config.file=/etc/prometheus/prometheus.yml"
  depends_on:
    - area51-tracker

3. 构建这个自定义Prometheus镜像，推送到AWS ECR（容器镜像仓库），然后在ECS任务定义中使用该镜像部署。

方案二：用EFS或实例绑定挂载配置文件

如果需要动态修改配置，可将prometheus.yml存储在AWS EFS中，或者上传到ECS容器实例的指定路径，然后在ECS任务定义中配置挂载：

1. 将prometheus.yml上传到EFS文件系统的指定目录；
2. 在ECS任务定义中，为Prometheus容器添加挂载点：
   • 源路径：EFS中的配置文件路径
   • 目标路径：/etc/prometheus/prometheus.yml
3. 确保ECS任务角色有访问EFS的权限，容器实例已挂载EFS。

内容的提问来源于stack exchange，提问作者Storyknight