如何修复Facebook Marketplace Selenium爬虫的NoSuchElementException错误

核心错误原因 #

1. By.CLASS_NAME不支持多类名：你传入的空格分隔多类名，会被Selenium当作单个完整类名查找，必然找不到元素。多类名匹配必须用By.CSS_SELECTOR，类名之间用.连接。
2. 错误使用find_element：单数find_element仅返回单个元素，后续遍历会报错，要获取所有匹配元素需用find_elements。
3. 硬编码sleep不稳定：固定等待时间无法适配页面加载速度，容易出现元素未加载完成的情况，建议用显式等待替代。
4. Facebook动态类名易失效：你用的x开头类名是平台动态生成的，随时可能变更，应改用基于语义属性的稳定定位逻辑。

修正后的代码 #

from selenium import webdriver
from selenium.webdriver.edge.service import Service
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

# 初始化Edge驱动，注意修正路径中的空格/括号问题
s = Service('C:\\Users\\CPM\\Downloads\\edgedriver_win64 (3)\\msedgedriver.exe')
driver = webdriver.Edge(service=s)

# 打开Facebook，等待手动登录
driver.get('https://www.facebook.com')
input("登录完成后按回车继续...")

# 打开目标车辆分类页面
url = 'https://www.facebook.com/marketplace/category/vehicles?minPrice=0&maxPrice=5000&maxMileage=150000&minMileage=0&sortBy=creation_time_descend&topLevelVehicleType=car_truck&exact=false'
driver.get(url)

# 显式等待车辆元素加载完成，最多等待10秒
wait = WebDriverWait(driver, 10)
# 用稳定的属性选择器：匹配带title属性的商品链接
vehicle_elements = wait.until(EC.presence_of_all_elements_located(
    (By.CSS_SELECTOR, 'a[title][href*="/marketplace/item/"]')
))

# 遍历打印车辆信息
for ele in vehicle_elements:
    title = ele.get_attribute('title')
    # 过滤有效车辆标题（含年份数字）
    if title and any(char.isdigit() for char in title):
        print(title)

# 关闭浏览器驱动
driver.quit()

额外说明 #

• 路径优化：建议把驱动文件移到无空格、无特殊字符的路径下，避免识别错误
• 登录逻辑：用input()替代固定sleep，确保登录操作完成后再执行爬取
• 定位逻辑：基于title属性和商品链接特征定位，比动态类名更可靠
• 显式等待：仅在元素加载完成后执行操作，避免因页面加载慢导致的元素未找到问题

内容的提问来源于stack exchange，提问作者Deo