如何在Apache Airflow中调整Gunicorn日志级别以缩减日志体积？

我完全懂你的困扰——这些INFO级别的Gunicorn日志（比如worker启停、信号处理记录）确实没啥实际排查价值，却能在几个月内把硬盘撑爆。下面是两种直接有效的解决方法：

1. 直接调整Gunicorn日志级别（最核心的解决手段） #

你可以通过Airflow的配置文件airflow.cfg来传递Gunicorn的启动参数，从而修改日志级别：

1. 打开你的airflow.cfg，找到[webserver]区块
2. 添加或修改gunicorn_args配置项，指定日志级别为WARNING（或者更高的ERROR，根据你的需求）：

[webserver]
# 其他配置保持不变
gunicorn_args = --log-level WARNING

3. 重启Airflow webserver服务，让配置生效

这样Gunicorn就只会记录WARNING及以上级别的日志，那些海量的INFO级信号、worker启停日志会直接被过滤掉，日志体积会立刻降下来。

2. 配置日志轮转（长期防护） #

即使调整了日志级别，长期运行后日志文件还是会慢慢变大，建议配合系统自带的logrotate工具定期切割日志：

1. 创建一个logrotate配置文件，比如/etc/logrotate.d/airflow-gunicorn
2. 写入以下配置（替换成你的gunicorn-error.log实际路径）：

/opt/airflow/logs/gunicorn-error.log {
    daily          # 每天轮转一次
    missingok      # 如果日志文件不存在也不报错
    rotate 7       # 保留最近7天的日志
    compress       # 压缩旧日志
    delaycompress  # 延迟压缩，确保当前日志轮转后再压缩
    notifempty     # 如果日志为空就不轮转
    create 644 airflow airflow  # 新日志文件的权限和属主
}

3. 系统会自动按配置定期处理日志，避免单个文件体积过大

完成以上两步后，你就不用再担心Gunicorn日志占满硬盘的问题了。

内容的提问来源于stack exchange，提问作者Stev