You need to enable JavaScript to run this app.
优惠活动
大模型
产品
解决方案
定价
更多

Selenium爬取剑桥词典时XPath定位元素报NoSuchElementException错误

问题原因
  • 绝对Xpath路径过于脆弱:你使用的从根节点开始的完整Xpath依赖页面的完整DOM结构,剑桥词典页面存在动态类名、区域化结构差异、UA适配结构调整,只要任意一级节点的类名、顺序发生微小变化,就会导致定位失败。
  • 等待策略不合理:点击cookie按钮后没有给释义区域预留加载时间,直接执行查找逻辑时可能释义元素还未完成渲染。
  • 额外语法问题:你代码中.text()的写法错误,text是WebElement的属性而非方法,不需要加括号,即使定位成功也会抛出异常。
解决方案
  • 改用相对Xpath定位:直接通过释义元素的稳定特征匹配,不需要依赖上层完整结构,第一个释义的定位语句可简化为//div[contains(@class, 'def ddef_d db')][1]
  • 替换强制等待为显式等待:使用Selenium的WebDriverWait等待目标元素加载完成再取值,避免因加载时序导致的定位失败。
  • 适配Selenium版本语法:如果使用Selenium 4及以上版本,需改用find_element(By.XPATH, 路径)的标准写法。
修正后完整代码示例
from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
import time

# 可根据自己的驱动配置调整初始化逻辑
driver = webdriver.Chrome()
driver.get("https://dictionary.cambridge.org/dictionary/english/assist") 

time.sleep(4)

# 用ID定位cookie同意按钮,比长Xpath更稳定
driver.find_element(By.ID, "onetrust-accept-btn-handler").click()

# 显式等待第一个释义元素加载,最长等待10秒
wait = WebDriverWait(driver, 10)
first_def = wait.until(EC.presence_of_element_located((By.XPATH, "//div[contains(@class, 'def ddef_d db')][1]")))
print(first_def.text)

内容的提问来源于stack exchange,提问作者aujarmani

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.09.26 10:24:03