Airflow新手求助：多代码仓库访问权限及任务迁移方案咨询

一、多Git仓库权限配置方案 #

• 团队专用SSH密钥共享访问
  在Airflow部署服务器上生成一套团队共用的SSH密钥对，把公钥添加到所有需要访问的Git仓库的部署密钥中（如果需要更新脚本，记得勾选允许写权限）。Airflow运行时用这个密钥拉取代码，彻底替代个人凭据：

  GIT_SSH_COMMAND="ssh -i /opt/airflow/team_ssh_key" git clone git@github.com:Enefit/boss_product_plan.git
  

• Git子模块关联多仓库
  把业务脚本仓库作为子模块关联到Airflow部署仓库里，这样Airflow只需要访问主仓库，就能同步所有依赖的脚本代码：

  # 在Airflow部署仓库目录下添加子模块
  git submodule add git@github.com:Enefit/boss_product_plan.git ./boss_product_plan
  # 拉取子模块的完整代码
  git submodule update --init --recursive
  

  注意：子模块的访问权限同样用团队SSH密钥配置，确保Airflow服务器能正常拉取。

二、团队共享Airflow的实用技巧 #

• 统一集群+RBAC权限管控
  放弃个人远程桌面部署，改用公司统一的Airflow集群，通过Airflow自带的RBAC系统给团队成员分配对应角色（Viewer、User、Admin等），确保每个人只能访问自己负责的DAG和任务。
• 业务脚本存共享盘，DAG直接调用
  既然Airflow能访问公司共享驱动器K:\PROJECT\DATA，可以把所有业务脚本仓库同步到共享盘的统一目录（比如K:\PROJECT\SCRIPTS），由团队共同维护更新。DAG里直接引用该路径下的脚本即可：

  from airflow.operators.bash import BashOperator
  
  run_boss_pp_script = BashOperator(
      task_id="execute_boss_pp_r_script",
      bash_command="Rscript K:/PROJECT/SCRIPTS/boss_product_plan/r_automate/boss_pp.R"
  )
  

• 避免DAG与业务脚本耦合
  不要把业务脚本直接放在Airflow的DAG目录里，保持DAG代码（调度逻辑）和业务脚本（执行逻辑）分离，降低维护成本，也方便团队分工协作。

三、常见问题排查要点 #

• 检查Airflow运行用户（比如airflow系统用户）是否拥有SSH密钥、共享盘目录的读取权限，权限不足是最常见的访问失败原因。
• 查看Git仓库的部署密钥状态，确认没有被设置为只读（如果需要更新脚本）。
• 通过Airflow任务的测试功能执行脚本调用任务，查看日志里的具体报错信息，精准定位问题。

内容的提问来源于stack exchange，提问作者Murad Khalilov