Apache Airflow启动scheduler或celery是否需要pickle5？协议5报错如何解决

首先明确两个核心疑问的答案：

1. Airflow 2.1.3的scheduler、Celery组件确实依赖pickle protocol 5的支持，该协议用于内部任务状态序列化、Celery消息传递等场景。pickle protocol 5是Python 3.8才内置到标准库pickle模块的特性，Python 3.6.8的原生pickle最高仅支持protocol 4，因此会触发你遇到的报错。
2. 你没有遗漏基础配置，这个问题属于版本兼容范畴：Airflow 2.1.3官方标称支持Python 3.6，但并没有把pickle5（Python 3.6/3.7下兼容protocol 5的backport库）设为强制依赖，因此默认安装时不会自动带上该依赖。

• 方案1（优先推荐）：升级Python版本到3.8及以上
  升级后Python原生支持pickle protocol 5，无需额外安装兼容包，也可以规避Python 3.6停止维护带来的后续安全、依赖兼容问题。
• 方案2（不升级Python的临时适配）：手动安装pickle5兼容包
  执行以下命令安装Python 3.6版本适配的pickle5 backport库：
  pip install pickle5
  安装完成后重新执行airflow scheduler即可正常启动。

内容的提问来源于stack exchange，提问作者Ravi