使用Selenium爬取网站时如何成功点击接受Cookie弹窗

你写的点击代码不生效，通常是以下几个原因导致，对应解法按优先级排序：

• 未等待弹窗元素完全加载可交互就执行点击
  该站点的Cookie授权弹窗是页面初始资源加载完成后异步渲染的，直接在页面打开瞬间执行元素查找，要么会抛出元素不存在异常，要么点到未完成渲染的透明遮罩层，点击动作不会触发实际效果。不要用固定时长的time.sleep，改用Selenium的显式等待，只等目标元素达到可点击状态再执行操作，同时注意旧版find_element_by_xpath接口在Selenium 4版本已正式废弃，建议改用By类定位。参考代码：

  from selenium.webdriver.support.ui import WebDriverWait
  from selenium.webdriver.support import expected_conditions as EC
  from selenium.webdriver.common.by import By
  
  # 初始化driver、打开目标站点的代码省略
  wait = WebDriverWait(driver, 15)
  accept_cookie_btn = wait.until(EC.element_to_be_clickable(
      (By.XPATH, '//button[contains(text(), "Accept All Cookies")]')
  ))
  accept_cookie_btn.click()
  

  如果执行点击时抛出「元素被其他元素遮挡」的异常，可以直接用JS触发点击绕过遮挡校验：

  driver.execute_script("arguments[0].click();", accept_cookie_btn)
  

• Cookie弹窗嵌套在独立iframe中
  不少站点的合规Cookie组件会放在独立iframe内渲染，直接在主页面DOM树查找元素永远无法命中。你可以打开浏览器开发者工具，检查Accept按钮的上层节点，如果存在<iframe>标签，需要先切换到对应iframe再执行查找点击：

  # 先定位cookie弹窗所在的iframe，切换上下文
  cookie_iframe = wait.until(EC.presence_of_element_located(
      (By.CSS_SELECTOR, 'iframe[title*="Cookie"]')
  ))
  driver.switch_to.frame(cookie_iframe)
  # 再执行上面的按钮查找、点击逻辑
  # 点击完成后记得切回主页面上下文，否则后续页面元素定位会失效
  driver.switch_to.default_content()
  

• 原有XPath定位规则鲁棒性太差
  你写的//*[@id="notice"]/div[5]/button[2]属于绝对层级定位，只要前端在notice容器下新增一个div节点、调整按钮顺序，定位就会直接偏移到其他元素上。建议优先用按钮的文本、aria-label、id等稳定属性做定位，不要依赖节点序号。
• 直接预置Cookie绕过弹窗渲染
  如果点击方案始终不稳定，可以在打开站点后直接把Cookie同意状态写入浏览器上下文，页面刷新时检测到已存在授权状态就不会弹出授权窗：

  driver.get("https://www.parkers.co.uk")
  # 写入站点的Cookie同意标识，具体键值可以在手动点击同意后从浏览器开发者工具Application面板提取
  driver.add_cookie({"name": "OptanonConsent", "value": "对应你手动授权后提取的cookie值", "domain": ".parkers.co.uk"})
  driver.refresh()
  

排查小技巧：如果执行点击后没有反应，可以先打印定位到的元素text属性，确认你找到的确实是接受Cookie的按钮，避免点错其他透明遮罩层的节点。

内容的提问来源于stack exchange，提问作者David