Airbyte（EC2 Docker部署）MongoDB连PostgreSQL报504错误求助

以下是针对问题的排查和解决步骤：

1. 排查EC2网络层面限制 #

• 检查EC2安全组规则：确保实例安全组允许**出站访问MongoDB端口（默认27017）**和PostgreSQL端口（默认5432）；若MongoDB/PostgreSQL部署在外部网络，需确认对方网络已放行EC2实例的公网IP访问。
• 检查VPC网络访问控制列表（NACL）：NACL为无状态规则，需同时配置入站和出站的对应端口放行规则，避免单向规则导致流量阻断。

2. 验证Docker容器网络连通性 #

• 测试容器内网络可达性：进入Airbyte Worker容器执行连通性测试

  docker exec -it airbyte-worker /bin/bash
  # 测试MongoDB连通性
  telnet <你的MongoDB地址> 27017
  # 测试PostgreSQL连通性
  telnet <你的PostgreSQL地址> 5432
  

  若无法连通，优先解决网络可达问题；若连通但延迟过高，考虑EC2实例所在区域与数据库的区域距离过远，更换同区域资源。
• 尝试修改容器网络模式：将Airbyte容器的网络模式从默认bridge改为host，避免容器网络转发带来的超时问题，修改docker-compose.yml中相关容器的network_mode配置后重启：

  docker-compose down && docker-compose up -d
  

3. 调整Airbyte全局与组件超时配置 #

• 配置Airbyte全局IO超时：在docker-compose.yml中为airbyte-server和airbyte-worker添加环境变量AIRBYTE_IO_TIMEOUT，设置更大的超时值（例如5分钟）：

  airbyte-server:
    environment:
      - AIRBYTE_IO_TIMEOUT=300000
  airbyte-worker:
    environment:
      - AIRBYTE_IO_TIMEOUT=300000
  

  重启容器生效。
• 检查PostgreSQL端超时参数：登录PostgreSQL执行以下命令查看超时设置，若值过小则调大：

  SHOW statement_timeout;
  SHOW idle_in_transaction_session_timeout;
  

4. 优化MongoDB源连接配置 #

• 确认MongoDB连接地址：EC2环境下避免使用本地域名或内网IP（若数据库不在同一VPC），改用公网IP或可解析的域名。
• 调整MongoDB查询超时：在Airbyte的MongoDB源配置中，设置maxTimeMS参数为更大值（例如10分钟），避免长查询被提前终止。

5. 检查EC2实例资源情况 #

• 通过AWS控制台或top命令查看EC2实例的CPU、内存使用率，若资源占用过高（CPU>90%/内存不足），会导致容器响应缓慢触发504，建议升级实例规格。

内容的提问来源于stack exchange，提问作者Raguraman H