Airflow 2.5.1中S3连接类型缺失问题求助

确认插件版本兼容性 #

Airflow 2.5.1对apache-airflow-providers-amazon有最低版本要求（需≥8.0.0），先检查当前安装版本：

pip show apache-airflow-providers-amazon

如果版本低于8.0.0，卸载后重装适配版本：

pip uninstall apache-airflow-providers-amazon -y
pip install apache-airflow-providers-amazon==8.0.0

验证插件加载状态 #

运行命令查看已加载的提供器列表：

airflow providers list

找到amazon条目，确认状态为loaded。如果显示not loaded，去Airflow调度器日志（默认路径$AIRFLOW_HOME/logs/scheduler）中查找加载失败的具体报错，排查依赖缺失问题。

手动创建Generic类型连接（临时可用方案） #

若插件加载正常但下拉菜单仍无S3选项，可直接用Generic类型创建连接：

• 进入Admin>Add connection页面，选择Generic作为连接类型
• 填写关键字段：
  • Conn Id：自定义名称（例如s3_default）
  • Extra：填入S3认证信息，格式如下：

    {"aws_access_key_id": "你的AWS访问密钥ID", "aws_secret_access_key": "你的AWS秘密访问密钥", "region_name": "你的S3存储桶所在区域"}
    

  该连接可正常被Airflow的Amazon相关算子调用。

检查Airflow配置文件 #

打开$AIRFLOW_HOME/airflow.cfg，确认两项配置：

• core.load_examples设置为False，加载示例可能干扰插件显示
• core.plugins_folder路径正确（默认是$AIRFLOW_HOME/plugins），避免插件被放置到错误路径

内容的提问来源于stack exchange，提问作者Dutt