Selenium处理Indeed分页时元素定位失败求助

首先，你用的//nav[@aria-label='pagination']语法本身没问题，但返回空列表说明当前页面里没有匹配这个属性的nav元素，或者元素还没加载完成、被嵌套在iframe里。

排查与修复方法 #

• 先手动验证定位：打开Indeed搜索结果页，按F12打开开发者工具，在搜索框里输入这个XPath，看能不能找到对应元素。如果找不到，说明Indeed的分页结构已经更新，得重新定位。
• 目前Indeed的分页通常可以用更稳定的data-testid属性定位，比如找页码列表：//ul[@data-testid='pagination-page-list']，或者直接定位页码按钮：//li[@data-testid='pagination-page-2']（数字对应具体页码）。
• 处理动态加载：Selenium经常会遇到页面没加载完就查找元素的情况，一定要加显式等待，避免返回空列表：

from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

# 等待分页元素加载完成，最多等待10秒
pagination_list = WebDriverWait(driver, 10).until(
    EC.presence_of_all_elements_located((By.XPATH, "//ul[@data-testid='pagination-page-list']/li"))
)

• 检查iframe：如果分页元素被放在iframe里，需要先切换到iframe再查找：

# 替换成实际iframe的定位方式
iframe = driver.find_element(By.XPATH, "//iframe[@id='xxx']") 
driver.switch_to.frame(iframe)
# 之后再执行分页元素查找操作

关于分页列表的疑问 #

正确的分页元素列表应该包含页码按钮（1、2、3...）和上一页/下一页按钮，所以只要定位正确，获取的WebElement列表会包含这些可点击的分页控件。

内容的提问来源于stack exchange，提问作者fdama