AirFlow-PySpark Docker镜像构建失败及Webserver 403 Forbidden求助

1. 检查AirFlow Webserver权限配置 #

• 确保docker-compose.yml中webserver服务的账号环境变量正确配置，容器启动时会自动创建对应账号：

  environment:
    - _AIRFLOW_WWW_USER_USERNAME=admin
    - _AIRFLOW_WWW_USER_PASSWORD=your_password
  

• 若自定义了webserver_config.py，检查公共访问角色设置，避免默认限制：

  AUTH_ROLE_PUBLIC = 'Admin'
  

2. 修复PySpark集成引发的文件权限问题 #

• 在Dockerfile中安装PySpark后，强制修复AirFlow工作目录的权限归属：

  # 安装PySpark后执行
  RUN chown -R airflow:airflow /opt/airflow
  

• 本地挂载的dags、logs、plugins目录需赋予AirFlow默认用户（UID/GID 50000）读写权限：

  sudo chown -R 50000:50000 ./dags ./logs ./plugins
  

3. 调整Webserver访问控制规则 #

• 通过环境变量放宽访问限制，允许所有主机访问（测试场景适用，生产环境需指定具体域名）：

  environment:
    - AIRFLOW__WEBSERVER__ALLOWED_HOSTS=*
    - AIRFLOW__WEBSERVER__X_FRAME_ENABLED=True
  

• 临时禁用CSRF保护排查问题（生产环境需配置合法CSRF域名）：

  environment:
    - AIRFLOW__WEBSERVER__CSRF_ENABLED=False
  

4. 验证容器网络与端口配置 #

• 确认docker-compose.yml中webserver的端口映射无冲突：

  ports:
    - "8080:8080"
  

• 检查本地防火墙是否拦截8080端口，优先用http://localhost:8080测试本地访问。

5. 清理缓存并重新部署 #

• 清理Docker缓存并重建镜像，避免旧配置残留：

  docker-compose build --no-cache
  docker-compose down -v
  docker-compose up -d
  

• 查看webserver日志确认账号创建成功：

  docker logs <airflow-webserver-container-id> | grep "Created user"
  

内容的提问来源于stack exchange，提问作者khuzi yunus