启动pyspider遇ImportError：无法导入Curlasync_HTTPClient求解决方案

我之前在类似环境下碰到过完全一样的问题，本质是Python 3.7 alpha版本的兼容性缺陷加上pyspider与tornado 4.5.3的适配问题导致的。给你几个经过验证的解决思路：

方案一：降级Python到3.6.x稳定版 #

Python 3.7.0a2是早期测试版本，很多老库（包括pyspider依赖的tornado分支）对它的异步API支持不完善，这是最根本的问题。

• 推荐用pyenv管理多Python版本，安装3.6.8或3.6.15这类长期支持的稳定版
• 创建独立虚拟环境：pyenv virtualenv 3.6.8 pyspider-env，然后激活环境pyenv activate pyspider-env
• 重新安装依赖：pip install pyspider tornado==4.5.3，启动pyspider all应该就能正常运行了

方案二：手动修改依赖文件（不降级Python的情况下） #

如果不想更换Python版本，可以通过修改代码绕过这个导入错误：

1. 修改tornado的curl_httpclient.py
   打开路径/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/site-packages/tornado/curl_httpclient.py，在文件末尾添加一行：

   Curlasync_HTTPClient = CurlAsyncHTTPClient
   

   这样就给pyspider需要的小写类名创建了一个别名，匹配它的导入逻辑。

2. 或者修改pyspider的导入语句
   找到pyspider中引用这个类的文件（通常是pyspider/fetcher/tornado_fetcher.py），把导入行：

   from tornado.curl_httpclient import Curlasync_HTTPClient
   

   修改为：

   from tornado.curl_httpclient import CurlAsyncHTTPClient
   

   直接使用tornado中实际存在的驼峰命名类。

方案三：安装兼容Python3.7的pyspider版本 #

部分较新的pyspider开发版已经修复了Python3.7的兼容性问题，可以尝试安装最新源码版：

pip uninstall pyspider -y
pip install git+https://github.com/binux/pyspider.git

安装完成后再启动pyspider all测试。

注意事项 #

• 操作前建议备份要修改的文件，避免误改导致其他问题
• 尽量使用虚拟环境管理依赖，避免污染全局Python环境

内容的提问来源于stack exchange，提问作者HneryInSH