Selenium 4.15.2通过tagName获取<a>标签返回空结果求助

可能的原因 #

1. 元素位于iframe内：很多SAAS平台的后台/登录页面会将部分内容（比如登录表单、导航链接）放在iframe中，此时主浏览器上下文无法直接定位到iframe内的元素。
2. 等待条件不合理：element_to_be_clickable要求元素同时满足可见和可点击，但页面中可能存在已加载但暂时不可见的<a>标签，导致等待逻辑触发时，仍有部分链接未被识别。
3. 页面动态加载延迟：作为单页应用，页面内容可能通过AJAX动态渲染，仅等待单个元素可点击不足以确保所有链接加载完成。

具体解决步骤 #

1. 检查并切换到iframe（优先处理） #

先确认页面是否存在iframe，若存在则切换到对应上下文：

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

driver = webdriver.Chrome()
driver.get("https://app.logrocket.com/")

# 尝试切换到页面中的iframe（若有）
try:
    iframe = WebDriverWait(driver, 20).until(
        EC.presence_of_element_located((By.TAG_NAME, "iframe"))
    )
    driver.switch_to.frame(iframe)
except:
    # 无iframe则跳过
    pass

2. 优化等待逻辑 #

将等待条件改为等待至少一个<a>标签存在于DOM中，而非要求可点击，确保覆盖所有已加载的链接：

# 等待所有<a>标签加载完成（或至少存在一个）
WebDriverWait(driver, 20).until(
    EC.presence_of_all_elements_located((By.TAG_NAME, "a"))
)

# 获取所有<a>标签
abc = driver.find_elements(By.TAG_NAME, "a")

3. 用JavaScript直接获取DOM元素（备选方案） #

如果Selenium的元素定位仍有问题，可通过执行JS直接从DOM中提取所有<a>标签，绕过Selenium的元素定位限制：

# 通过JS获取所有<a>标签并转为列表
abc = driver.execute_script("return Array.from(document.querySelectorAll('a'));")

# 验证结果
print(f"共找到 {len(abc)} 个链接")
for elem in abc:
    print(elem.get_attribute("href"))

4. 处理动态加载的极端情况 #

如果页面存在持续动态渲染的内容，可等待页面加载完成标志（如加载动画消失）：

# 等待加载 spinner 消失（需替换为页面实际的加载元素选择器）
WebDriverWait(driver, 20).until(
    EC.invisibility_of_element_located((By.CSS_SELECTOR, ".loading-spinner"))
)

内容的提问来源于stack exchange，提问作者saffin