Selenium中find_elements无法定位全部元素问题求助

核心问题分析 #

页面元素属于动态加载模式，你当前设置的固定滚动位置和等待时间不足以让所有目标元素完成渲染，导致Selenium仅捕获到了最先加载的1个元素。

具体修正方案 #

1. 优化代码逻辑，改用显式等待 #

隐式等待灵活性不足，显式等待可以精准等待所有目标元素加载完成，同时调整滚动逻辑触发全部元素渲染：

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
import time

# 路径前加r避免Windows转义字符问题
PATH = r"C:\Program Files (x86)\chromedriver.exe"
driver = webdriver.Chrome(PATH)
driver.get("https://www.eduqas.co.uk/qualifications/computer-science-as-a-level/#tab_pastpapers")
driver.maximize_window()

# 初始化显式等待，最长等待10秒
wait = WebDriverWait(driver, 10)

# 滚动到页面底部，触发动态加载逻辑
driver.execute_script("window.scrollTo(0, document.body.scrollHeight);")
time.sleep(1)  # 给加载留缓冲时间

# 等待所有匹配选择器的元素加载完成
elements = wait.until(EC.presence_of_all_elements_located((By.CSS_SELECTOR, ".css-13punl2")))

for x in elements:
    # 点击前将元素滚动到视口内，避免点击失败
    driver.execute_script("arguments[0].scrollIntoView(true);", x)
    time.sleep(0.5)
    x.click()

print(len(elements))
driver.quit()

2. 关键调整说明 #

• 路径加r：解决Windows路径中转义字符引发的错误
• 滚动到页面底部：触发页面动态加载机制，让所有隐藏的目标元素完成渲染
• 显式等待presence_of_all_elements_located：确保所有匹配元素都出现在DOM中再执行后续操作
• 点击前滚动到元素视口：避免元素不在可见区域导致的点击失败问题

3. 额外排查方向 #

如果仍未捕获到全部元素，检查以下两点：

• 元素是否在iframe内：若存在iframe，需要先用driver.switch_to.frame()切换上下文后再查找元素
• 类名是否动态变化：打开浏览器开发者工具，刷新页面确认.css-13punl2是否为稳定类名，若类名动态生成，改用更稳定的复合选择器（比如结合父元素静态类名：#tab_pastpapers .css-13punl2）

内容的提问来源于stack exchange，提问作者Ramin Moradi