VS Code创建首个Airflow数据管道时报日志目录软链接OS错误

首先你代码里存在基础语法错误，这会放大日志相关警告的触发概率：你用了循环关键字while来声明DAG上下文，Airflow的DAG需要使用with关键字做上下文管理，错误写法会导致DAG实例反复被初始化，反复触发日志目录操作逻辑。修正后的基础代码如下：

import airflow
from airflow import DAG
with DAG(dag_id='simple_dag') as dag:
    pass

你遇到的OS Error while attempting to symlink the latest log directory是Airflow的非致命警告，触发原因是Airflow尝试在日志目录下创建指向最新运行日志的软链接时，受操作系统权限、文件系统兼容性限制操作失败，不会直接导致DAG运行崩溃，可按以下步骤解决：

• 优先修正上述代码的关键字错误，避免DAG重复加载反复触发日志目录操作。
• 检查Airflow日志目录权限：
  • Linux/macOS环境下，默认日志路径为~/airflow/logs，执行chmod -R 755 ~/airflow/logs给当前运行用户分配目录读写权限，不要用sudo权限启动普通Airflow进程，避免日志目录所有者被改为root导致普通用户无操作权限。
  • WSL环境下不要将Airflow根目录放在Windows挂载盘（如/mnt/c/路径下），NTFS文件系统对WSL软链接支持存在兼容问题，将Airflow home目录放在WSL原生ext4分区路径下即可。
  • Windows原生环境（Airflow官方不推荐原生Windows部署）下，开启系统开发者模式即可放开普通用户创建软链接的权限限制。
• 如果不需要快速跳转最新日志的快捷功能，可以直接修改Airflow配置文件airflow.cfg，在[logging]配置段将link_latest_log = True改为False，关闭软链接创建逻辑，不会影响DAG的正常调度运行。

该警告仅影响日志快捷访问能力，不会阻塞DAG任务执行，优先修正代码语法错误后，再根据自身部署环境调整权限或配置即可。

内容的提问来源于stack exchange，提问作者japneekkour raina