Python Selenium长时运行报渲染接收超时（-0.000）问题求助

异常核心特征 #

• 脚本可连续稳定运行1-2小时后触发TimeoutException，报错固定为Timed out receiving message from renderer: -0.000，无同类问题常见的动态变化的超时浮点数值
• 已排除版本适配问题：替换Chrome/ChromeDriver 86/87/88正式版、89测试版后均稳定复现该报错
• 数月前相同代码在短周期运行场景下可正常工作，仅长周期运行（设计最大时长3.5小时）时触发故障

根因说明 #

返回固定-0.000的超时不属于常规的页面加载超时：正常渲染超时会返回动态计算的等待时长值，出现-0.000说明Chrome渲染管线完全僵死，Selenium与浏览器的IPC通信通道已经拿不到真实的超时计算值，返回了异常占位的固定数值。

• 故障触发的本质原因是Chrome在连续长时间运行下，会持续累积未释放的内存、残留的JS上下文、积压的渲染任务，当进程内存占用达到系统阈值后，渲染进程直接进入无响应状态，和WebDriver的通信中断。这也是为什么替换多版本浏览器与驱动后故障仍然复现——问题和版本适配无关，是长周期运行的进程状态累积问题。

可落地修复步骤 #

1. 启动ChromeDriver时追加内存与渲染兜底参数，从配置层降低长周期运行的僵死概率：
   在ChromeOptions初始化时加入以下配置：

   from selenium.webdriver.chrome.options import Options
   chrome_options = Options()
   # 规避长运行场景下的/dev/shm内存不足问题
   chrome_options.add_argument("--disable-dev-shm-usage")
   # 关闭容易触发后台进程节流、导致渲染无响应的特性
   chrome_options.add_argument("--disable-background-timer-throttling")
   chrome_options.add_argument("--disable-backgrounding-occluded-windows")
   chrome_options.add_argument("--disable-renderer-backgrounding")
   # 限制渲染进程的内存占用上限
   chrome_options.add_argument("--renderer-process-limit=1")
   # 显式指定远程调试端口，避免端口动态异常导致的通信中断
   chrome_options.add_argument("--remote-debugging-port=9222")
   

2. 替换无保护的driver.get调用逻辑，加自定义超时兜底：
   原代码中直接裸调用driver.get的逻辑，替换为带异常处理的安全导航函数，遇到僵死状态时主动终止导航、清理页面残留状态，避免直接抛出异常中断流程：

   def safe_navigate(driver, target_url, max_retry=3):
       try:
           # 显式设置30秒页面加载超时
           driver.set_page_load_timeout(30)
           driver.get(target_url)
       except TimeoutException:
           # 强制终止当前页面加载
           driver.execute_script("window.stop()")
           # 清理页面本地存储的残留状态
           driver.execute_script("window.localStorage.clear(); window.sessionStorage.clear()")
           if max_retry > 0:
               time.sleep(2)
               safe_navigate(driver, target_url, max_retry -1)
   

3. 增加长周期运行的主动兜底逻辑：
   • 每完成20个分类的处理，主动检查Chrome进程的内存占用，如果内存占用超过1.5G，就主动退出当前WebDriver实例，重建会话后恢复登录态继续执行
   • 主动关闭非活跃的标签页，避免多标签页累积导致的渲染进程积压
   • 3.5小时设计时长的脚本可拆分为2个1.5-2小时的分段任务，中间主动退出Chrome进程重建会话，从流程上规避长周期运行的内存泄漏问题

内容的提问来源于stack exchange，提问作者sachin kumar s