Airflow 2.4.2本地Web UI响应迟缓且报错，求优化方案

一、Web Server 配置调整 #

• 修改airflow.cfg中的web服务参数：
  • 增加Web Worker数量：将web_server_workers从默认1调整为2-4（根据本地CPU核心数设置），比如web_server_workers = 4，提升并发处理能力
  • 开启异步模式：Airflow 2.4+支持异步Web服务，设置web_server_enable_async = True，可大幅降低UI请求响应时间
  • 延长Worker超时时间：将worker_timeout从默认30秒改为60秒，避免因超时导致的ERR_BAD_RESPONSE错误：worker_timeout = 60

二、数据库优化（核心影响因素） #

• 替换默认SQLite数据库：SQLite不支持高并发，本地学习可改用PostgreSQL或MySQL。修改airflow.cfg中的sql_alchemy_conn配置对应的数据库连接字符串，比如PostgreSQL的连接串格式为postgresql+psycopg2://user:password@localhost:5432/airflow
• 若暂时保留SQLite，调整连接池参数：设置sql_alchemy_pool_size = 5和sql_alchemy_max_overflow = 10，提升数据库连接复用率

三、资源与执行器优化 #

• 清理本地机器后台占用资源的进程，确保Airflow有足够的CPU和内存资源
• 替换默认SequentialExecutor为LocalExecutor：修改airflow.cfg中的executor = LocalExecutor（需配合非SQLite数据库使用），提升任务并发处理能力，间接优化UI响应

四、UI与数据清理 #

• 禁用无用插件：若plugins_folder下有未使用的插件，可移除或通过web_server_plugins_blacklist配置禁用，减少UI加载负担
• 清理旧DAG运行记录：执行命令airflow db clean --clean-before-timestamp $(date -d "-30 days" +%Y-%m-%dT%H:%M:%S)，删除30天前的历史数据，降低数据库查询压力
• 清理旧日志：定期删除airflow.cfg中base_log_folder目录下的旧日志文件，避免UI加载日志时卡顿

五、依赖版本检查 #

• 确保Airflow依赖包为对应版本的最新兼容版，执行命令pip install --upgrade apache-airflow==2.4.2修复可能存在的已知性能问题

内容的提问来源于stack exchange，提问作者Vijay Bhoomireddy