如何使用Selenium和Python根据前置文本或类名定位文本内容

嘿，作为刚接触Web Scraping的新手，遇到这种动态类别的定位问题太正常了！别慌，我来给你分享两种靠谱的方法，完美适配你遇到的场景：

方法1：根据前置文本定位对应的span #

这种方法适合前置文本（比如"First Category: "）比较稳定的情况，直接通过文本节点找到它后面的span元素。

核心思路 #

用XPath定位到包含目标前置文本的文本节点，然后通过following-sibling找到它后面紧邻的span兄弟元素。

代码示例（Python） #

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

driver = webdriver.Chrome()
driver.get("你的目标网页URL")

# 定义要查找的前置文本
target_text = "First Category: "

try:
    # 等待元素加载完成，避免动态加载问题
    target_span = WebDriverWait(driver, 10).until(
        EC.presence_of_element_located(
            (By.XPATH, f"//div[@class='div_class']/text()[contains(., '{target_text}')]/following-sibling::span[@class='span_class']")
        )
    )
    # 获取span的文本内容
    category_value = target_span.text
    print(f"{target_text}对应的值：{category_value}")
except Exception as e:
    # 处理类别缺失的情况
    print(f"未找到{target_text}对应的类别")

driver.quit()

解释XPath逻辑 #

• //div[@class='div_class']：先定位到包含所有类别的父div
• /text()[contains(., '{target_text}')]：找到div中包含目标前置文本的文本节点
• /following-sibling::span[@class='span_class']：取这个文本节点后面的span兄弟元素

方法2：根据的类名定位对应的span #

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

driver = webdriver.Chrome()
driver.get("你的目标网页URL")

# 定义要查找的<i>类名
target_i_class = "first_i_class"

try:
    target_span = WebDriverWait(driver, 10).until(
        EC.presence_of_element_located(
            (By.XPATH, f"//div[@class='div_class']/i[@class='{target_i_class}']/following-sibling::span[@class='span_class']")
        )
    )
    category_value = target_span.text
    print(f"类名为{target_i_class}的<i>对应的span值：{category_value}")
except Exception as e:
    print(f"未找到类名为{target_i_class}的<i>对应的类别")

driver.quit()