选择器未知时，如何用Selenium处理「接受全部Cookie」弹窗？

你遇到的Cookie弹窗问题很常见，禁用通知的设置本来就和Cookie弹窗无关，所以没效果。下面给你几个通用方案，不用依赖具体选择器就能绕过：

方法一：通用文本匹配点击 #

大多数网站的「接受全部Cookie」按钮都会包含类似Accept All、接受全部、同意全部、I Agree这类文本，我们可以通过文本定位元素，加上等待和异常捕获，避免弹窗不存在时脚本崩溃。

修改后的完整代码如下：

from selenium import webdriver
from selenium.webdriver.chrome.service import Service
from selenium.webdriver.chrome.options import Options
from webdriver_manager.chrome import ChromeDriverManager 
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
import time

chrome_options = webdriver.ChromeOptions()
# 禁用通知（保留你原代码，但此设置不影响Cookie弹窗）
prefs = {"profile.default_content_setting_values.notifications" : 2}
chrome_options.add_experimental_option("prefs",prefs)

browser = webdriver.Chrome(ChromeDriverManager().install(), chrome_options=chrome_options)

links = ["https://www.henleyglobal.com/", "https://markets.ft.com/data"]

# 定义常见的接受Cookie按钮文本，覆盖中英文场景
accept_texts = ["Accept All", "接受全部", "同意全部", "I Agree", "Accept Cookies", "同意"]

for link in links:
    browser.get(link)
    time.sleep(1)  # 给页面基础加载留一点缓冲时间
    
    # 循环尝试匹配文本并点击
    for text in accept_texts:
        try:
            # 用XPATH匹配包含指定文本的可点击元素，最多等待5秒
            accept_btn = WebDriverWait(browser, 5).until(
                EC.element_to_be_clickable((By.XPATH, f"//*[contains(text(), '{text}')]"))
            )
            accept_btn.click()
            print(f"成功处理{link}的Cookie弹窗（匹配文本：{text}）")
            break
        except:
            # 当前文本匹配失败，尝试下一个
            continue
    
    # 这里插入你的数据爬取逻辑
    print(f"开始处理{link}的内容")

browser.quit()

方法二：预设Cookie绕过弹窗 #

如果能提前获取目标网站的有效Cookie，可以在访问页面之前把Cookie注入浏览器，网站会认为你已经同意了Cookie政策，弹窗大概率不会出现。

示例代码片段（需替换实际Cookie值）：

# 先打开目标网站域名下的页面，让浏览器关联域名
browser.get("https://www.henleyglobal.com/")
# 注入Cookie，键值对需从浏览器开发者工具（F12→Application→Cookies）获取
browser.add_cookie({
    "name": "cookie_consent",
    "value": "accepted",
    "domain": ".henleyglobal.com"
})
browser.refresh()  # 刷新后弹窗应该消失

方法三：Chrome选项屏蔽Cookie提示 #

添加Chrome实验性选项，尝试阻止Cookie弹窗加载：

# 在原chrome_options配置中添加以下内容
chrome_options.add_argument("--disable-popup-blocking")
chrome_options.add_experimental_option("excludeSwitches", ["enable-automation"])
chrome_options.add_experimental_option('useAutomationExtension', False)
chrome_options.add_argument("--disable-features=CookieControls")

这个方法不一定对所有网站有效，但可以作为补充尝试。

注意事项 #

• 优先用WebDriverWait等待元素，减少对time.sleep()的依赖，提升脚本稳定性。
• 异常捕获必须保留，确保没有弹窗的网站不会中断脚本执行。
• 极少数网站的Cookie按钮会嵌套在iframe中，遇到这种情况需要先切换到iframe再操作。

内容的提问来源于stack exchange，提问作者suraj