Selenium Driver调用get_log()突然停止输出日志问题排查

你的问题核心是多线程Selenium无头Chrome实例偶尔停止输出浏览器日志，但驱动本身仍可正常交互，手动访问页面能看到日志。以下是可能的原因及对应的解决思路：

1. 命令行参数冲突：--disable-logging抑制日志输出 #

你在Chrome选项中添加了--disable-logging参数，这个参数会直接禁用Chrome的日志系统，优先级高于你通过DesiredCapabilities设置的loggingPrefs。即使你开启了日志收集，这个参数会导致Chrome停止向Selenium暴露浏览器日志，这是最可能的根因。

解决办法：
移除chrome_options.add_argument('--disable-logging')，替换为确保日志开启的参数：

chrome_options.add_argument('--enable-logging')
chrome_options.add_argument('--log-level=0')  # 0=Verbose，确保捕获所有日志级别

2. Chrome日志缓冲区溢出 #

Chrome的浏览器日志有固定大小的缓冲区，当长时间运行且未及时读取日志时，旧日志会被新日志覆盖，甚至缓冲区满后停止接收新日志。你的无限循环读取逻辑如果没有合理的间隔，可能导致缓冲区处理异常。

解决办法：

• 调整日志读取逻辑，记录最后处理的日志时间戳，每次只处理新日志：

  import time
  last_log_timestamp = 0
  while True:
      logs = driver.get_log('browser')
      # 过滤出未处理的新日志
      new_logs = [log for log in logs if log['timestamp'] > last_log_timestamp]
      for log in new_logs:
          # 处理日志逻辑
          last_log_timestamp = log['timestamp']
      time.sleep(0.5)  # 添加合理间隔，避免频繁调用占用资源
  

• 通过Chrome参数调整日志详细程度，优化缓冲区使用策略：

  chrome_options.add_argument('--vmodule=*=2')
  

3. 多线程下的驱动实例状态异常 #

虽然使用了threadLocal隔离线程驱动实例，但长时间运行后，部分驱动实例的日志连接可能因内存泄漏、Chrome进程隐性异常（未完全崩溃）而失效，导致无法继续获取日志，但仍能执行元素查找等基础操作。

解决办法：

• 定期重启驱动实例，比如每处理完固定数量任务或运行一定时间后，销毁当前驱动并重新创建：

  def cleanup_driver():
      driver = getattr(threadLocal, 'driver', None)
      if driver:
          driver.quit()
          delattr(threadLocal, 'driver')
  

• 在日志停止输出时，主动验证驱动连接状态，比如执行driver.title，若出现异常则触发驱动重启。

4. 无头模式的日志收集限制 #

Chrome旧无头模式的日志收集机制与有头模式存在差异，某些场景下（如页面长时间后台运行、JS执行环境变化），日志可能被系统或Chrome本身抑制。

解决办法：

• 切换到Chrome 112+支持的新无头模式，该模式更接近有头Chrome的行为，日志收集更稳定：

  chrome_options.add_argument('--headless=new')
  

• 确保页面JS使用标准console.log输出日志，避免使用框架自定义的非标准日志API，这类日志可能无法被Selenium捕获。

内容的提问来源于stack exchange，提问作者HJA24