使用Selenium时为何无法通过for循环抓取class类元素？

你遇到的核心问题是错误地将WebElement对象传给了driver.get()方法——这个方法需要接收字符串格式的URL地址，而不是页面元素。另外，当你调用driver.get()跳转到新页面后，原来页面的元素列表会直接失效，也会引发后续的元素操作错误。

为什么不用循环没问题？ #

当你不使用循环时，应该是直接操作单个元素（比如获取某个房源的文本），此时没有涉及页面跳转，元素还在当前DOM中，所以能正常工作。但循环里你试图用元素对象来跳转页面，这完全不符合driver.get()的参数要求。

修正后的代码示例 #

我们需要先把所有房源的链接提取出来存到列表里，再循环访问这些链接，这样就能避免元素失效和参数类型错误的问题：

from logging import exception
from typing import Text
from selenium import webdriver
from selenium.webdriver.support.ui import Select
from selenium.webdriver.support.ui import WebDriverWait
import time
import pandas as pd
from selenium.common.exceptions import NoSuchElementException
from selenium.webdriver.common.keys import Keys
import csv

PATH = "C:/ProgramData/Anaconda3/scripts/chromedriver.exe" # 保持chromedriver路径正确
driver = webdriver.Chrome(PATH)
driver.get("https://www.gharghaderi.com/")
driver.implicitly_wait(10)

# 第一步：提前提取所有房源的链接（必须在页面跳转前完成）
house_links = []
house_elements = driver.find_elements_by_class_name('griddetails')
for elem in house_elements:
    # 定位每个房源元素内的a标签，获取跳转链接
    link = elem.find_element_by_tag_name('a').get_attribute('href')
    house_links.append(link)

# 第二步：循环访问每个链接并抓取数据
for link in house_links:
    driver.get(link)
    # 这里可以根据目标页面的结构，抓取你需要的具体信息
    try:
        # 示例：假设页面用class为'property-detail'的元素存放核心信息
        house_info = driver.find_element_by_class_name('property-detail').text
        print(house_info)
    except NoSuchElementException:
        print("当前页面未找到目标详情元素")
    # 加短暂等待，确保页面加载完成（也可以用WebDriverWait做显式等待，更高效）
    time.sleep(2)

driver.quit()

关键注意点 #

• 提前提取所有链接：必须在跳转页面之前把所有需要访问的URL都提取出来，否则页面跳转后，原来的house_elements列表里的元素会变成“过时元素”（触发StaleElementReferenceException），无法再操作。
• driver.get()的参数要求：这个方法只接受字符串URL，任何其他类型的参数都会引发类型错误，这是你之前报错的直接原因。
• 异常处理的正确用法：之前的try-except没起作用，是因为你捕获的是NoSuchElementException，但实际错误是参数类型错误，所以需要针对性捕获对应异常（比如TypeError），或者先解决根本问题再处理元素找不到的情况。

内容的提问来源于stack exchange，提问作者Pravablo