Selenium定位元素异常：仅能获取1个匹配元素的问题求助

问题根源 #

你的代码存在两个关键错误：

1. 循环逻辑错误：获取元素和打印的代码写在了页面遍历循环的外部，导致只会抓取最后一次跳转的页面（第9页）的元素，前8页的内容完全没被处理。
2. 等待方式不可靠：固定时长的time.sleep()无法确保页面元素完全加载，经常会在元素还未渲染完成时就执行定位操作，导致获取到的元素数量不全。

修复后的代码 #

import sys
from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

# 重定向输出到日志文件
stdoutOrigin = sys.stdout 
sys.stdout = open("log.txt", "w")

driver = webdriver.Chrome(executable_path="C:\chromedriver.exe")
driver.get("https://ludwigbeck.mitarbeiterangebote.de/")

# 登录流程
driver.find_element(By.ID, 'loginData[email]').send_keys("removed email")
driver.find_element(By.ID, 'loginData[password]').send_keys("removed password")
driver.find_element(By.NAME, 'cbg3-submit').click()
driver.implicitly_wait(3)
driver.find_element(By.NAME, 'cbg3-submit').click()

# 遍历1-9页，将元素处理逻辑放入循环内
for page_num in range(1, 10):
    driver.get(f"https://ludwigbeck.mitarbeiterangebote.de/search?s=*&page={page_num}")
    # 显式等待所有目标元素加载完成，最多等待10秒
    WebDriverWait(driver, 10).until(
        EC.presence_of_all_elements_located((By.CLASS_NAME, 'cbg3-list-item--discount'))
    )
    # 此时获取元素，确保拿到当前页全部内容
    rabatte = driver.find_elements(By.CLASS_NAME, 'cbg3-list-item--discount')
    for item in rabatte:
        print(item.text)

driver.quit()
sys.stdout.close()
sys.stdout = stdoutOrigin

额外优化建议 #

• 推荐使用webdriver-manager替代硬编码驱动路径，它能自动匹配Chrome版本下载对应驱动，避免版本不兼容问题。
• 如果页面是滚动加载更多内容，需要添加滚动到底部的逻辑，确保所有元素都被渲染出来。
• 检查页面是否包含iframe，如果目标元素在iframe内，必须先切换到对应iframe再进行定位。

内容的提问来源于stack exchange，提问作者rmey