使用Selenium抓取网站表单动态选项失败求助

我来帮你捋捋问题出在哪，你遇到的这个空列表情况，大概率是两个核心问题导致的，咱们一步步解决：

问题1：类名定位方式错误 #

你用的find_elements_by_class_name("accessabilityBar textIndent")是错误的用法——这个方法只能接收单个类名，不能同时传两个空格分隔的类名。浏览器会把整个字符串当成一个完整的类名去查找，自然找不到匹配的元素，所以返回空。

问题2：没有等待动态元素加载 #

输入关键词后，页面需要从后端拉取数据并渲染出选项，这个过程是异步的。你直接去查找元素，很可能元素还没生成，导致获取不到内容。

修复后的代码示例 #

我给你调整了代码，加入了显式等待（最可靠的等待方式），同时修正了元素定位的问题：

from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
from selenium.webdriver.common.by import By

# 假设你已经输入了关键词，接下来等待动态选项加载
try:
    # 等待所有目标元素出现，最多等10秒
    wait = WebDriverWait(browser, 10)
    options = wait.until(EC.presence_of_all_elements_located(
        (By.CSS_SELECTOR, ".accessabilityBar.textIndent")  # 用CSS选择器定位两个类的元素
    ))
    
    # 遍历元素获取文本，不用索引，更安全
    depart = [option.text.strip() for option in options if option.text.strip()]
    print(depart)
except Exception as e:
    print(f"出错了：{str(e)}")

额外调试建议 #

• 如果还是拿不到内容，可以先打印len(options)看看有没有定位到元素。如果长度是0，说明选择器可能不对，你可以右键检查动态生成后的元素，确认类名是否正确，或者换用XPath定位。
• 也可以打印browser.page_source，查看当前页面的HTML结构，确认目标元素是否真的存在于页面中。
• 避免用宽泛的Exception捕获，尽量捕获具体的异常（比如TimeoutException），这样更容易定位问题。

内容的提问来源于stack exchange，提问作者johnwick