Python Selenium调用driver.get()后元素定位不稳定问题求助

• 修复无头模式配置：你代码里定义了Options但没传给webdriver.Firefox()，导致无头模式根本没启用，这是不稳定的核心原因之一。修改初始化代码：

  driver = webdriver.Firefox(options=options)
  

• 调整页面加载策略：默认的normal策略会等待所有资源加载完成，容易因第三方广告、静态资源超时卡住。改成eager（仅等待DOM加载完成）或none（不等待资源加载）：

  from selenium.webdriver.common.desired_capabilities import DesiredCapabilities
  
  caps = DesiredCapabilities.FIREFOX.copy()
  caps["pageLoadStrategy"] = "eager"  # 可选值：normal, eager, none
  driver = webdriver.Firefox(options=options, desired_capabilities=caps)
  

• 设置超时时间：给driver添加页面加载、元素查找的超时限制，避免无限挂起：

  driver.set_page_load_timeout(30)  # 页面加载超时30秒
  driver.implicitly_wait(10)  # 元素查找隐式等待10秒
  

• 添加稳定化启动参数：给Firefox加参数减少加载压力、模拟真实浏览器，降低被反爬拦截的概率：

  options.add_argument('-headless')
  options.add_argument('--disable-images')  # 禁用图片加载，加快速度
  options.add_argument('--user-agent=Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/114.0.0.0 Safari/537.36')
  options.add_argument('--disable-extensions')
  options.add_argument('--disable-gpu')
  

• 增加重试机制：针对无规律失败，添加重试逻辑，失败后销毁driver重新初始化：

  from selenium.common.exceptions import TimeoutException, WebDriverException
  
  def get_url(search):
      max_retries = 3
      for attempt in range(max_retries):
          driver = None
          try:
              options = Options()
              options.add_argument('-headless')
              # 加入上述稳定化参数
              driver = webdriver.Firefox(options=options)
              driver.set_page_load_timeout(30)
              driver.get('https://genius.com/')
              print('go')
              elem = driver.find_element(By.ID, 'application')
              print(elem)
              driver.quit()
              return
          except (TimeoutException, WebDriverException) as e:
              print(f"尝试 {attempt+1} 失败: {str(e)}")
              if driver:
                  driver.quit()
              if attempt == max_retries -1:
                  raise  # 最后一次失败抛出异常
  

内容的提问来源于stack exchange，提问作者malonn