如何在Airflow中通过SSH克隆代码仓库？

看起来你遇到的核心问题是Docker容器（以及后续的Airflow服务器）里没有你的SSH密钥，导致Git无法通过SSH认证完成仓库克隆。我分两种场景给你具体的解决办法：

一、Docker环境下的Airflow配置 #

方法1：直接挂载本地SSH密钥目录 #

这是最直接且安全的方式，把你本地的.ssh目录挂载到Airflow容器对应的用户目录下：

1. 打开你的docker-compose.yml文件，找到Airflow相关服务（比如webserver、worker），在volumes部分添加一行：

   - ~/.ssh:/root/.ssh  # 如果容器以root用户运行
   # 若Airflow用airflow用户运行，就改成：
   # - ~/.ssh:/home/airflow/.ssh
   

2. 重启Docker容器让挂载生效。
3. 注意！SSH对密钥权限要求极严，必须确保容器内的密钥文件权限是600，目录权限是700。如果挂载后权限不对，可以进入容器执行：

   chmod 700 /root/.ssh
   chmod 600 /root/.ssh/id_rsa
   

4. 为了避免第一次克隆时弹出主机确认提示（这会导致命令直接失败），可以把本地的known_hosts也挂载进去，或者提前在容器里执行：

   ssh-keyscan myrepo.com >> /root/.ssh/known_hosts
   

方法2：通过环境变量传递密钥（不推荐，仅作备选） #

如果不方便挂载目录，可以把密钥内容编码后作为环境变量传入容器，再写入到.ssh目录：

1. 本地把私钥做base64编码：

   base64 -w 0 ~/.ssh/id_rsa > id_rsa_base64.txt
   

2. 在docker-compose.yml里添加环境变量：

   environment:
     - SSH_PRIVATE_KEY=<你的base64编码内容>
   

3. 在容器启动脚本里添加解码并写入密钥的命令：

   echo $SSH_PRIVATE_KEY | base64 -d > /root/.ssh/id_rsa
   chmod 600 /root/.ssh/id_rsa
   

   这种方式要注意密钥的安全性，尽量不要把敏感信息暴露在配置文件里。

二、Airflow服务器（非Docker环境）的配置 #

如果后续要部署到独立的Airflow服务器上，步骤类似：

1. 先找到Airflow运行的系统用户（通常是airflow），切换到该用户：

   sudo su - airflow
   

2. 创建.ssh目录并设置权限：

   mkdir -p ~/.ssh
   chmod 700 ~/.ssh
   

3. 把你的SSH私钥复制到这个目录，然后设置严格的权限：

   cp /path/to/your/local/id_rsa ~/.ssh/
   chmod 600 ~/.ssh/id_rsa
   

4. 同样处理主机认证，避免克隆时的交互提示：

   ssh-keyscan myrepo.com >> ~/.ssh/known_hosts
   chmod 644 ~/.ssh/known_hosts
   

额外注意事项 #

• 如果你的SSH密钥设置了密码，自动化环境里需要用ssh-agent来管理密钥，否则克隆时会卡住等待密码输入。可以在Airflow的DAG里先启动ssh-agent并添加密钥，或者直接使用无密码的SSH密钥（更适合自动化场景）。
• 确保Bitbucket仓库的访问权限已经正确配置，你的公钥已经添加到Bitbucket账号的SSH密钥列表里。

备注：内容来源于stack exchange，提问作者Yash