如何用Python Selenium定位shadow-root(open)内元素？Cookie按钮点击失败求助

问题描述：爬取德国联邦劳工局网站时，Cookie弹窗位于shadow-root元素下，现有代码无法成功点击“全部允许”按钮。

原代码问题分析：

• 仅等待了宿主元素bahf-cookie-disclaimer-dpl3的存在，但未确保其shadow-root已完全加载
• 未等待目标按钮处于可点击状态，可能元素存在但还未交互就绪
• 脚本查询元素的方式可以更简洁可靠

修正后的代码示例：

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

driver = webdriver.Chrome('driverPath')
driver.get("https://www.arbeitsagentur.de/jobsuche/suche?was=Fachlagerist%2Fin&angebotsart=1")

# 等待宿主元素出现
cookie_host = WebDriverWait(driver, 15).until(
    EC.presence_of_element_located((By.TAG_NAME, "bahf-cookie-disclaimer-dpl3"))
)

# 获取shadow-root并等待内部按钮可点击
accept_btn = WebDriverWait(driver, 15).until(
    lambda d: d.execute_script("""
        const shadowRoot = arguments[0].shadowRoot;
        return shadowRoot.querySelector('button.ba-btn.ba-btn-primary[aria-label="Alle zulassen – Alle Cookies werden akzeptiert"]');
    """, cookie_host)
)

# 确保按钮可点击后执行点击
WebDriverWait(driver, 10).until(EC.element_to_be_clickable(accept_btn)).click()

关键修改说明：

• 使用lambda表达式结合execute_script，在等待逻辑中直接获取shadow-root内的按钮，确保元素加载完成
• 增加element_to_be_clickable等待条件，避免因元素未就绪导致点击失败
• 简化shadow-root元素查询的脚本写法，提升可读性

内容的提问来源于stack exchange，提问作者ibarahim maghfoul