Python 3.9 Selenium click()在Vimeo失效，无法定位元素求助

问题背景 #

作为Python新手，尝试用Selenium点击Vimeo用户页面的“Load more”按钮时，出现NoSuchElementException，无法定位元素。原代码及目标按钮HTML如下：

原代码 #

import selenium
from selenium import webdriver
from selenium.webdriver.common.keys import Keys
from selenium.webdriver.common.by import By
from selenium.webdriver.common.action_chains import ActionChains

# others
from bs4 import BeautifulSoup
import time
import pandas as pd
driver = webdriver.Chrome()

for i in range (1,10):
    url = 'https://vimeo.com/user22715452'
    driver.get(url)

folder = driver.find_element(By.XPATH,"//button[@class='sc-bkkeKt LtbA-D']")
folder.click

目标按钮HTML及原XPath #

<button format="primary" class="sc-bkkeKt LtbA-D xh-highlight"><span class="sc-fFeiMQ iGSRsu">Load more</span><svg viewBox="0 0 20 20"><path d="M14.5 10.4l-3.4 3.5V2H8.9v11.9l-3.4-3.5L4 11.9l6 6.1 6-6.1z"></path></svg><div radius="50" class="sc-dkPtRN iArNot"></div></button>
//*[@id="__next"]/div[4]/div[2]/div[2]/div[2]/section/section/section/section/button>

错误信息 #

selenium.common.exceptions.NoSuchElementException: Message: no such element: Unable to locate element: {"method":"xpath","selector":"//button[@class='sc-bkkeKt LtbA-D']"}
(Session info: chrome=107.0.5304.87)

解决方案 #

1. 修复动态类名问题 #

Vimeo使用动态生成的类名（如sc-bkkeKt、LtbA-D），刷新页面后类名会变化，直接用类名定位必然失败。改用按钮内的文本定位更稳定：

//button[contains(span/text(), 'Load more')]

或者匹配按钮的format属性+文本的组合定位：

//button[@format='primary' and contains(., 'Load more')]

2. 添加显式等待 #

页面加载需要时间，直接查找元素会因为元素未渲染完成报错。使用Selenium的显式等待，等待元素可点击后再操作：

from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

# 替换原查找元素的代码
wait = WebDriverWait(driver, 10)
load_more_btn = wait.until(EC.element_to_be_clickable((By.XPATH, "//button[contains(span/text(), 'Load more')]")))
load_more_btn.click()

3. 修正代码逻辑错误 #

• 原循环中每次调用driver.get(url)会重复刷新页面，导致之前的操作失效，应把driver.get(url)放在循环外。
• folder.click少了括号，正确写法是folder.click()。

4. 检查iframe（可选） #

如果上述方法仍无效，再检查按钮是否在iframe内：

1. 打开浏览器开发者工具，定位到“Load more”按钮。
2. 在Elements面板中查看按钮的父级是否有<iframe>标签。
3. 如果存在iframe，需要先切换到iframe再查找元素：

# 替换为实际的iframe定位方式，比如通过id或xpath
iframe = driver.find_element(By.XPATH, "//iframe[@xxx='xxx']")
driver.switch_to.frame(iframe)
# 然后再查找按钮
load_more_btn = wait.until(EC.element_to_be_clickable((By.XPATH, "//button[contains(span/text(), 'Load more')]")))
load_more_btn.click()
# 操作完成后切回主文档
driver.switch_to.default_content()

修正后的完整代码示例 #

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
import time

driver = webdriver.Chrome()
url = 'https://vimeo.com/user22715452'
driver.get(url)
wait = WebDriverWait(driver, 10)

for i in range(1, 10):
    try:
        # 等待加载更多按钮可点击
        load_more_btn = wait.until(EC.element_to_be_clickable((By.XPATH, "//button[contains(span/text(), 'Load more')]")))
        # 滚动到按钮位置（避免按钮在视口外无法点击）
        driver.execute_script("arguments[0].scrollIntoView();", load_more_btn)
        load_more_btn.click()
        # 等待内容加载
        time.sleep(2)
    except Exception as e:
        print(f"第{i}次点击失败: {e}")
        break

driver.quit()

内容的提问来源于stack exchange，提问作者HALEY