Selenium Webdriver爬取职位参考码XPath定位返回0元素问题

• 未设置元素等待：目标页面是动态渲染的，发起元素定位请求时，岗位列表的DOM节点还没加载完成，此时定位自然返回空结果，这也是代码运行耗时长、拿不到结果的核心原因。
• 定位逻辑鲁棒性差：一是使用了Selenium 4已废弃的find_elements_by_xpath接口（该问题仅触发警告，不直接导致定位失败）；二是XPath对data-eui-handler属性做了全值精确匹配，这类前端框架生成的属性经常会动态拼接额外参数、空格，全值匹配极易失效。
• 控制台的蓝牙适配器报错是Windows环境下Chrome驱动的通用无关报错，不影响页面元素定位，无需处理。
• 额外注意：从URL特征判断目标站点是SAP系招聘系统，这类系统的岗位搜索结果通常嵌套在iframe中，未切换iframe上下文时，无论怎么写定位表达式都找不到对应元素。

1. 替换过时的定位接口，使用官方推荐的find_elements(By.XPATH, 定位表达式)写法。
2. 增加显式等待逻辑，等目标元素加载完成后再执行定位，不要页面刚跳转就立刻查找元素。
3. 优化XPath表达式，用contains做属性模糊匹配，替代全值精确匹配，提升定位稳定性。
4. 增加iframe判断逻辑，如果岗位列表在iframe内，先切换到对应iframe再执行定位。

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
import pandas as pd

PATH = "C:/Users/MyUser/Desktop/Driver/chromedriver.exe"
driver = webdriver.Chrome(PATH)
driver.get("https://www.uke.jobs/sap(bD1kZSZjPTUwMA==)/bc/bsp/kwp/bsp_eui_rd_uc/main.do?action=to_uc_search")
driver.maximize_window()

# 处理iframe嵌套场景，SAP招聘系统默认会用iframe承载搜索结果
iframes = driver.find_elements(By.TAG_NAME, 'iframe')
if iframes:
    driver.switch_to.frame(iframes[0])

# 显式等待最多10秒，直到目标岗位行加载完成
wait = WebDriverWait(driver, 10)
ref_code_elements = wait.until(
    EC.presence_of_all_elements_located(
        (By.XPATH, "//tr[contains(@data-eui-handler, 'eui.app.controller.search_results.selectRow')]/td[1]")
    )
)

# 提取职位编码文本
ref_codes = [elem.text.strip() for elem in ref_code_elements]
print(f"定位到的职位编码数量：{len(ref_codes)}")
print("职位编码列表：", ref_codes)

User_input = input()

如果运行后还是无法定位到元素，可以在定位逻辑前加一行print(driver.page_source)打印当前页面源码，搜索职位编码的关键字，确认元素所在的DOM层级，调整XPath或者iframe切换逻辑即可。

内容的提问来源于stack exchange，提问作者Trdlo