Python Selenium如何获取指定ol标签内的所有链接？

你的原代码会抓取页面上所有带href属性的<a>标签，要只获取<ol class="pagination__items">标签内的链接，只需修改XPath定位表达式，把查找范围限定在目标ol标签内部即可。

修改后的核心代码 #

直接调整XPath路径，定位到目标ol下的所有<a>标签：

chromedriver = webdriver.Chrome(service=Service(ChromeDriverManager().install()))
chromedriver.get("https://www.ebay.co.uk/usr/username")
# 限定在class为pagination__items的ol标签内查找带href的a标签
links = chromedriver.find_elements("xpath", ".//ol[@class='pagination__items']//a[@href]")

for link in links:
    print(link.get_attribute("href"))

额外建议：添加显式等待 #

如果页面加载较慢，可能会出现找不到目标ol标签的情况，建议添加显式等待确保元素加载完成：

from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

chromedriver = webdriver.Chrome(service=Service(ChromeDriverManager().install()))
chromedriver.get("https://www.ebay.co.uk/usr/username")

# 等待目标ol标签加载完成，最多等10秒
wait = WebDriverWait(chromedriver, 10)
pagination_ol = wait.until(EC.presence_of_element_located(("xpath", ".//ol[@class='pagination__items']")))

# 从已加载的ol标签内查找链接
links = pagination_ol.find_elements("xpath", ".//a[@href]")

for link in links:
    print(link.get_attribute("href"))

内容的提问来源于stack exchange，提问作者Abdullah Ergun