Python 3.11.4之后版本中requests模块请求性能骤降问题咨询

你的测试结果显示requests、httpx在Python 3.11.5及3.12.3版本中性能暴跌，但urllib不受影响，结合依赖关系来看，问题核心出在urllib3与新版本Python的兼容性上——requests和httpx都基于urllib3实现HTTP请求，而urllib是Python标准库原生实现，不受第三方库兼容问题影响。

可能的核心原因 #

Python 3.11.5开始对SSL/TLS模块做了几项关键调整：

• 默认启用了更严格的证书验证逻辑，导致建立SSL连接时的证书链校验耗时大幅增加
• 调整了socket的超时处理机制，urllib3的旧版本适配逻辑在新版本Python下触发了不必要的等待
• 对TLS握手流程做了优化，但部分urllib3版本未同步适配，反而导致握手延迟

排查与验证步骤 #

1. 验证证书验证影响
   在测试代码中临时禁用证书验证（仅用于测试，生产环境禁止），对比耗时变化：

   import requests
   import datetime
   
   starttime = datetime.datetime.now()
   
   for i in range(10):
       response = requests.get(f"https://google.com?param={i}", verify=False)
       data = response.text
   
   endtime = datetime.datetime.now()
   
   print(f"requests test elapsed - {(endtime - starttime).total_seconds()}s")
   

   如果耗时明显降低，说明是证书验证逻辑的改动导致的问题。

2. 检查urllib3版本差异
   在不同版本的虚拟环境中执行pip show urllib3，查看3.11.4和3.11.5/3.12.3中urllib3的版本是否一致。若版本不同，尝试回退到3.11.4环境中的urllib3版本：

   pip install urllib3==<3.11.4环境中的版本号>
   

   再重新运行测试代码，看性能是否恢复。

3. 指定TLS版本测试
   通过requests适配器强制指定TLS版本，验证是否解决延迟问题：

   import requests
   import datetime
   import ssl
   from requests.adapters import HTTPAdapter
   
   starttime = datetime.datetime.now()
   
   session = requests.Session()
   adapter = HTTPAdapter(ssl_version=ssl.PROTOCOL_TLSv1_3)
   session.mount("https://", adapter)
   
   for i in range(10):
       response = session.get(f"https://google.com?param={i}")
       data = response.text
   
   endtime = datetime.datetime.now()
   
   print(f"requests test elapsed - {(endtime - starttime).total_seconds()}s")
   

临时解决方案 #

• 若证书验证是问题根源：指定本地信任的证书路径（verify="/path/to/cert.pem"），或在可控环境中临时禁用验证（不推荐生产）
• 回退urllib3到与Python 3.11.4兼容的版本
• 改用urllib标准库实现HTTP请求，避免第三方库的兼容问题

内容的提问来源于stack exchange，提问作者user24247924