使用XPath/Selenium/Python查找网站脚本字符串失败问题排查

首先明确：你的问题和<!DOCTYPE html>声明完全无关，核心原因是目标<script>元素位于嵌套的<iframe>内部，而WebDriver默认是在主页面的文档上下文中执行查找操作，无法直接访问iframe里的内容。

为什么当前代码找不到元素？ #

你写的XPath会遍历主页面里的iframe、script等元素，但主页面的iframe只是一个容器，实际的目标script在这个iframe加载的子文档里，主页面上下文根本看不到它，所以返回结果长度为0。

正确的解决步骤 #

要访问iframe内的元素，必须先切换到对应的iframe上下文，步骤如下：

1. 定位并切换到目标iframe
   你可以通过iframe的属性（比如src、索引或者其他特征）定位它，然后调用switch_to.frame()方法切换上下文：

   # 先定位到包含目标script的iframe（这里可以根据实际观察到的iframe特征调整定位方式）
   target_iframe = driver.find_element_by_xpath("//iframe[contains(@src, '你看到的iframe地址特征')]")
   # 切换到该iframe的上下文
   driver.switch_to.frame(target_iframe)
   

   如果iframe没有明显的标识，也可以通过索引切换（比如第一个iframe用driver.switch_to.frame(0)），但这种方式稳定性较差，优先推荐用属性定位。

2. 在iframe上下文内查找目标script
   切换后，再执行查找逻辑（可以优化XPath让它更精准）：

   # 精准定位id为utag_81且src包含agkn的script
   target_script = driver.find_element_by_xpath("//script[@id='utag_81' and contains(@src, 'agkn')]")
   # 或者如果要找所有符合条件的元素，用find_elements
   x = driver.find_elements_by_xpath("//script[@id='utag_81' or contains(@src, 'agkn')]")
   

3. （可选）切回主页面上下文
   如果你之后还要操作主页面的元素，记得切回去：

   driver.switch_to.default_content()
   

额外提示 #

• 确保iframe已经完全加载完成后再切换和查找，否则可能还是找不到元素，可以添加等待逻辑（比如WebDriverWait）：

  from selenium.webdriver.support.ui import WebDriverWait
  from selenium.webdriver.support import expected_conditions as EC
  from selenium.webdriver.common.by import By
  
  # 等待iframe可被定位，最长等待10秒
  WebDriverWait(driver, 10).until(EC.presence_of_element_located((By.XPATH, "//iframe[contains(@src, '特征')]")))
  

• 你的原始XPath过于宽泛，建议缩小范围到script元素即可，不需要遍历img、a等，这样能提升查找效率和准确性。

内容的提问来源于stack exchange，提问作者tribs