解决while循环ElementClickInterceptedException及遍历下载按钮问题

问题原因 #

1. ElementClickInterceptedException：目标下载按钮被页面元素遮挡（如悬浮导航、未滚动到可视区域），导致点击操作被拦截。
2. 硬编码循环次数：原代码用i<7固定循环次数，无法适配页面所有下载按钮，不能获取全部PDF链接。

解决方案 #

方案1：优化点击逻辑+动态获取所有按钮（兼容弹窗/遮挡场景） #

修改代码如下，通过显式等待、滚动到元素、JS点击解决拦截问题，同时动态获取所有下载按钮：

from selenium import webdriver
from selenium.webdriver.common.action_chains import ActionChains
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
import time

driver = webdriver.Chrome()
driver.maximize_window()
driver.get("https://responsiblesoy.org/public-audit-reports?lang=en")

# 等待搜索按钮可点击并点击
search_button = WebDriverWait(driver, 30).until(
    EC.element_to_be_clickable((By.XPATH, '/html/body/div[1]/div[2]/div/div/div[1]/div/div/div/div[2]/div/div/div/div/form/div/div[4]/input'))
)
search_button.click()

# 等待所有下载按钮加载完成
WebDriverWait(driver, 30).until(
    EC.presence_of_all_elements_located((By.XPATH, '//div[@class="views-row"]//div[4]/a'))
)
time.sleep(2)  # 确保页面渲染完全

pdf_links = []
# 动态获取所有下载按钮元素
download_buttons = driver.find_elements(By.XPATH, '//div[@class="views-row"]//div[4]/a')

for button in download_buttons:
    try:
        # 滚动到按钮所在位置，确保可视
        ActionChains(driver).move_to_element(button).perform()
        # 使用JS点击避免元素遮挡导致的拦截错误
        driver.execute_script("arguments[0].click();", button)
        
        # 等待新窗口打开后切换
        WebDriverWait(driver, 10).until(lambda d: len(d.window_handles) > 1)
        new_window = driver.window_handles[1]
        driver.switch_to.window(new_window)
        
        # 记录PDF链接
        pdf_url = driver.current_url
        print(pdf_url)
        pdf_links.append(pdf_url)
        
        # 关闭新窗口并切回原页面
        driver.close()
        driver.switch_to.window(driver.window_handles[0])
    except Exception as e:
        print(f"处理按钮失败: {str(e)}")
        continue

print("\n所有PDF链接列表:")
print(pdf_links)
driver.quit()

方案2：直接获取href属性（更高效，无需打开新窗口） #

如果下载按钮的href直接指向PDF链接，可跳过打开新窗口的步骤，直接提取属性值：

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
import time

driver = webdriver.Chrome()
driver.maximize_window()
driver.get("https://responsiblesoy.org/public-audit-reports?lang=en")

# 点击搜索按钮
search_button = WebDriverWait(driver, 30).until(
    EC.element_to_be_clickable((By.XPATH, '/html/body/div[1]/div[2]/div/div/div[1]/div/div/div/div[2]/div/div/div/div/form/div/div[4]/input'))
)
search_button.click()

# 等待下载按钮加载
WebDriverWait(driver, 30).until(
    EC.presence_of_all_elements_located((By.XPATH, '//div[@class="views-row"]//div[4]/a'))
)
time.sleep(2)

# 直接提取所有按钮的href属性
download_buttons = driver.find_elements(By.XPATH, '//div[@class="views-row"]//div[4]/a')
pdf_links = [btn.get_attribute('href') for btn in download_buttons if btn.get_attribute('href')]

print("所有PDF链接列表:")
print(pdf_links)
driver.quit()

关键改动说明 #

• 显式等待替代固定休眠：用WebDriverWait等待元素加载/可点击，比time.sleep更稳定，避免因页面加载慢导致的错误。
• 动态获取按钮数量：通过find_elements获取所有下载按钮，自动适配页面所有内容，无需硬编码循环次数。
• JS点击解决拦截：当元素被遮挡时，execute_script直接触发点击事件，绕过前端遮挡问题。
• 跳过窗口切换（方案2）：直接提取href属性，大幅提升效率，同时避免窗口切换的潜在错误。

内容的提问来源于stack exchange，提问作者bearbear