Python Selenium替代方案：无需等待页面加载加速Web操作的方法

一、无需等待页面完全加载即可执行操作的方法 #

• 调整浏览器加载策略：通过设置pageLoadStrategy让浏览器无需等待所有资源加载完成，仅需等待DOM解析完毕就可执行操作。支持三种策略：

  • normal：默认，等待页面完全加载完成
  • eager：等待DOMContentLoaded事件触发（DOM解析完成，无需等待样式、图片等资源）
  • none：完全不等待页面加载，直接执行后续操作
    示例代码（Python）：

  from selenium import webdriver
  from selenium.webdriver.chrome.options import Options
  
  options = Options()
  options.page_load_strategy = 'eager'
  driver = webdriver.Chrome(options=options)
  

• 用显式等待替代全局等待：不要强制等待固定时长，而是针对需要操作的元素设置等待条件，元素就绪后立即执行操作，避免无效等待。
  示例代码（Python）：

  from selenium.webdriver.common.by import By
  from selenium.webdriver.support.ui import WebDriverWait
  from selenium.webdriver.support import expected_conditions as EC
  
  # 等待目标按钮可点击，最长等待10秒
  target_btn = WebDriverWait(driver, 10).until(
      EC.element_to_be_clickable((By.ID, "submit-btn"))
  )
  target_btn.click()
  

• 禁用非必要浏览器特性：关闭图片、CSS甚至非必需的JavaScript加载，大幅减少页面加载时间（注意：部分页面功能依赖JS，需根据场景判断）。
  示例代码（Python）：

  options.add_argument('--blink-settings=imagesEnabled=false')  # 禁用图片加载
  options.add_argument('--disable-css')  # 禁用CSS渲染
  options.add_argument('--disable-javascript')  # 禁用JavaScript（谨慎使用）
  

二、优化Selenium页面间导航耗时的技巧 #

• 复用浏览器会话：避免每次导航都启动新浏览器实例，通过远程调试模式连接已打开的浏览器，节省启动和初始化时间。
  步骤：

  1. 手动启动Chrome时添加参数：chrome.exe --remote-debugging-port=9222 --user-data-dir="D:\ChromeProfile"
  2. Selenium连接已启动的浏览器：

  options = Options()
  options.add_experimental_option("debuggerAddress", "127.0.0.1:9222")
  driver = webdriver.Chrome(options=options)
  

• 直接调用接口获取数据：如果目标数据可以通过API接口获取，完全不用模拟页面导航，直接发送HTTP请求拿到数据，效率远高于页面跳转。

• 使用CDP命令加速导航：通过Chrome DevTools Protocol（CDP）的Page.navigate命令执行导航，比常规的driver.get()更高效，还能灵活配置导航参数。
  示例代码（Python）：

  driver.execute_cdp_cmd("Page.navigate", {"url": "https://your-target-url.com"})
  

• 禁用浏览器缓存：部分页面加载慢是因为缓存读写或过期资源重加载，启动浏览器时禁用缓存可提升导航速度。
  示例代码（Python）：

  options.add_argument('--disable-cache')
  options.add_argument('--disk-cache-size=0')
  

内容的提问来源于stack exchange，提问作者The Last Samurai