Selenium页面加载超时设置及Facebook Bot慢网下关闭驱动问题

Selenium提供多种超时控制方案，按需选择：

• 页面加载超时：设定整个页面加载的最长等待时长，超时后抛出异常

  from selenium import webdriver
  from selenium.common.exceptions import TimeoutException
  
  driver = webdriver.Chrome()
  # 设置页面加载超时为10秒
  driver.set_page_load_timeout(10)
  try:
      driver.get("https://example.com")
  except TimeoutException:
      # 超时后执行处理逻辑，比如关闭driver
      driver.quit()
  

• 隐式等待：全局设置元素查找的超时时间，在指定时长内轮询查找目标元素

  driver.implicitly_wait(10)  # 所有元素查找操作最多等待10秒
  

• 显式等待：针对特定元素或条件设置等待，灵活性更高

  from selenium.webdriver.support.ui import WebDriverWait
  from selenium.webdriver.support import expected_conditions as EC
  from selenium.webdriver.common.by import By
  
  # 等待最多10秒，直到目标元素出现
  target_element = WebDriverWait(driver, 10).until(
      EC.presence_of_element_located((By.ID, "element_id"))
  )
  

• 调整页面加载策略：默认策略会等待所有资源（图片、JS、CSS）加载完成，切换为eager或none可提前结束加载

  from selenium.webdriver.chrome.options import Options
  
  chrome_options = Options()
  # eager：DOM加载完成即停止，无需等待资源加载
  # none：不等待任何加载，直接执行后续操作
  chrome_options.page_load_strategy = 'eager'
  driver = webdriver.Chrome(options=chrome_options)
  

要实现页面加载完成前终止操作并关闭driver，核心是结合页面加载超时和异常捕获，配合加载策略优化：

1. 先设置页面加载策略为eager，减少不必要的资源等待
2. 设定页面加载超时时间，超时后捕获异常并立即关闭driver

示例代码：

from selenium import webdriver
from selenium.common.exceptions import TimeoutException
from selenium.webdriver.chrome.options import Options

chrome_options = Options()
chrome_options.page_load_strategy = 'eager'  # 提前结束页面加载
driver = webdriver.Chrome(options=chrome_options)

try:
    driver.set_page_load_timeout(15)  # 设置15秒加载超时
    driver.get("https://www.facebook.com/login")
    # 后续登录逻辑...
except TimeoutException:
    # 网络加载过慢，直接关闭driver
    print("网络加载超时，正在关闭机器人...")
    driver.quit()

如果需要更强制的中断，可在超时后执行JavaScript停止页面加载：

except TimeoutException:
    driver.execute_script("window.stop();")  # 强制停止页面加载
    driver.quit()

注意：Facebook有严格的反自动化机制，频繁自动化操作可能导致账号受限，建议控制操作频率并遵守平台规则。

内容的提问来源于stack exchange，提问作者Ajit Singh