使用Python Selenium获取指定div内链接及背景图遇问题

核心错误原因 #

触发'WebElement' object is not iterable错误的根本原因是使用了find_element()方法——它仅返回第一个匹配的单个WebElement对象，而非可迭代的元素列表。要获取所有符合条件的链接，必须改用find_elements()方法。

优化定位逻辑 #

结合需求（获取paint_wrap内的链接，排除paint_color子元素内的内容），可以使用更精准的定位表达式：

• CSS选择器：#timer .paint_wrap > a（直接定位paint_wrap的直接子元素<a>，自动排除paint_color内的元素）
• XPATH：//div[@class='paint_wrap']/a（效果同上，若需兼容更复杂场景，可写为//div[@class='paint_wrap']/a[not(ancestor::div[@class='paint_color'])]）

修正后的完整代码 #

from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
from selenium.webdriver.common.by import By

# 等待所有目标链接加载完成（替换原单个元素等待）
WebDriverWait(self.driver, 20).until(
    EC.visibility_of_all_elements_located((By.CSS_SELECTOR, "#timer .paint_wrap > a"))
)

# 获取所有符合条件的a元素列表
elements = self.driver.find_elements(By.CSS_SELECTOR, "#timer .paint_wrap > a")

for element in elements:
    # 获取href属性
    href = element.get_attribute("href")
    print(f"链接地址：{href}")
    
    # 获取背景图片并提取真实URL
    bg_img = element.value_of_css_property("background-image")
    # 处理格式：去除url()和引号
    if bg_img and bg_img != "none":
        bg_url = bg_img.replace("url(", "").replace(")", "").replace('"', "").replace("'", "")
        print(f"背景图片：{bg_url}")
    else:
        print("背景图片：无")

额外说明 #

1. 等待条件替换为visibility_of_all_elements_located，确保所有目标链接都已加载可见，避免遗漏元素。
2. 背景图片的返回值默认包含url("xxx")格式的包裹，需要通过字符串处理提取真实URL；如果元素没有背景图，会返回none，需做判断处理。

内容的提问来源于stack exchange，提问作者supras