You need to enable JavaScript to run this app.
优惠活动
大模型
产品
解决方案
定价
更多

Airflow Docker临时文件存储位置咨询:写入/tmp文件无法定位

问题分析与解决办法
  • 容器文件系统隔离:Docker容器拥有独立的文件系统,你任务里写入的/tmp是运行该任务的容器内部的/tmp目录,既不是宿主机的/tmp,也不是你登录的其他容器的/tmp目录。

  • 定位任务所在容器:Airflow的任务通常运行在worker容器中,而非你可能登录的webserver或scheduler容器。按以下步骤找到目标容器:

    1. 执行docker ps列出所有运行中的容器,找到名称包含airflow-worker的容器(默认部署环境下以此为前缀)。
    2. 进入对应的worker容器:docker exec -it <worker-container-name> /bin/bash,随后查看容器内的/tmp目录即可找到文件。
  • 持久化文件到宿主机:如果需要文件在容器重启后保留,或直接在宿主机访问,需在docker-compose.yml中配置卷挂载:

    1. 在services下的airflow-worker(及其他需要写入文件的服务)中添加卷配置:
      volumes:
        - ./local_tmp:/tmp
      
    2. 重启Airflow服务:docker-compose down && docker-compose up -d
    3. 此后任务写入容器/tmp的文件会同步到宿主机的./local_tmp目录,直接在宿主机就能访问。
  • 通过日志确认容器:也可在Airflow UI的任务日志中查看运行容器ID,日志开头一般会显示Running on host <container-id>的信息,用该ID进入容器即可查找文件。

内容的提问来源于stack exchange,提问作者Qizhen Ruan

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.07.01 15:32:32