You need to enable JavaScript to run this app.
优惠活动
大模型
产品
解决方案
定价
更多

Airflow 1.10.9对接MariaDB 10.4.15出现Aborted connection告警如何解决?

告警触发原因
  • Airflow 1.10.9版本自身存在连接泄漏缺陷,对应你提到的AIRFLOW-4848相关问题,该版本中scheduler、worker执行部分调度逻辑后未主动关闭数据库连接,连接被闲置到超时后被MariaDB强制回收,触发通信包读取错误告警。
  • Airflow默认数据库连接池配置不合理,1.10.x版本默认sql_alchemy_pool_recycle参数为-1,不会主动回收空闲连接,当连接空闲时间超过MariaDB的超时阈值后,服务端主动断开连接,Airflow端无感知,后续尝试读取已失效连接时触发告警。
  • MariaDB的wait_timeout、interactive_timeout参数设置过短,或Airflow与MariaDB之间的中间链路(防火墙、负载均衡)的空闲连接回收时间短于数据库超时时间,导致连接被提前断开。
排查步骤
  • 检查MariaDB超时参数配置,执行命令show variables like '%timeout%';,确认wait_timeout、interactive_timeout的取值,若小于30分钟则大概率是触发告警的原因。
  • 统计异常连接增长速率,执行命令show global status like 'Aborted_connects';,对比告警触发频率,确认该数值增长和告警出现的时间是否匹配。
  • 检查Airflow配置文件airflow.cfg中的数据库连接池配置,确认sql_alchemy_pool_recycle是否为默认的-1,以及sql_alchemy_pool_size、sql_alchemy_max_overflow是否设置过大导致连接数超过数据库限制。
  • 排查Airflow服务与MariaDB之间的网络策略,确认是否存在TCP空闲会话超时回收的配置,且回收时间短于数据库的超时时间。
修复方案
  • 调整Airflow数据库连接池配置,修改airflow.cfg中对应参数:
# 连接池大小根据实际业务并发调整,建议不超过30
sql_alchemy_pool_size = 10
# 溢出连接数上限
sql_alchemy_max_overflow = 20
# 连接回收时间,必须小于MariaDB的wait_timeout,建议设置为1800秒(30分钟)
sql_alchemy_pool_recycle = 1800

配置修改完成后重启所有Airflow服务(scheduler、worker、webserver)。

  • 调整MariaDB超时参数,保证两个超时值大于Airflow的连接回收时间,建议设置为3600秒(1小时)。可以直接执行命令生效:
set global wait_timeout=3600;
set global interactive_timeout=3600;

也可以将上述配置写入MariaDB的配置文件,避免重启后配置失效。

  • 若条件允许,将Airflow升级到1.10.15版本,该版本是1.10系列的最终维护版本,已经修复了AIRFLOW-4848相关的连接泄漏问题,可从根源上避免该类告警。
  • 调整中间网络链路的空闲连接超时配置,保证防火墙、负载均衡的会话超时时间大于MariaDB的wait_timeout,避免连接被中间链路提前断开。

内容的提问来源于stack exchange,提问作者angelokh

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.09.30 21:57:02