Python Selenium爬虫问题：无文件提示失效+遗漏每页最后条目

一、try-except未触发无文件提示的原因及修复 #

1. 异常捕获类型不匹配 #

如果代码用了宽泛的except Exception:，但实际遇到的是Selenium专属异常（比如元素未找到的NoSuchElementException），或者你写错了异常类名（比如误写NoSuchElementError），都会导致异常被遗漏，提示不触发。

修复：精准捕获目标异常，示例代码：

from selenium.common.exceptions import NoSuchElementException

try:
    brochure_btn = driver.find_element(By.XPATH, "//a[contains(text(),'Capabilities Brochure')]")
    brochure_btn.click()
    # 后续下载逻辑...
except NoSuchElementException:
    print("该条目无Capabilities Brochure文件，跳过")

2. 使用了复数查找方法（find_elements） #

用driver.find_elements(...)查找元素时，找不到会返回空列表，不会抛出异常，所以try-except完全不会触发。这种情况应该判断列表长度而非依赖异常捕获。

修复：

brochure_btns = driver.find_elements(By.XPATH, "//a[contains(text(),'Capabilities Brochure')]")
if not brochure_btns:
    print("该条目无Capabilities Brochure文件，跳过")
else:
    brochure_btns[0].click()
    # 后续下载逻辑...

3. 页面加载不充分导致误判 #

元素还没加载完成就执行查找，可能抛出TimeoutException而非NoSuchElementException，如果你的try-except没覆盖这个异常，就不会触发提示。

修复：添加显式等待确保元素加载完成：

from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

try:
    brochure_btn = WebDriverWait(driver, 10).until(
        EC.presence_of_element_located((By.XPATH, "//a[contains(text(),'Capabilities Brochure')]"))
    )
    brochure_btn.click()
except (NoSuchElementException, TimeoutException):
    print("该条目无Capabilities Brochure文件，跳过")

二、遗漏每页最后一个条目的原因及修复 #

1. 循环范围错误 #

如果代码用了for i in range(len(items)-1)这类循环，会直接跳过最后一个索引的条目。检查循环逻辑，确保覆盖所有条目。

修复：

items = driver.find_elements(By.CLASS_NAME, "item-container")
# 直接遍历所有条目，不要手动缩减范围
for item in items:
    # 处理每个条目的逻辑...

2. 最后一个条目未进入视图 #

Selenium无法定位视图外的元素，最后一个条目可能在页面底部未滚动到，导致找不到元素或操作失败。

修复：处理最后一个条目时先滚动到其位置：

from selenium.webdriver.common.action_chains import ActionChains

# 遍历到最后一个条目时
last_item = items[-1]
ActionChains(driver).move_to_element(last_item).perform()
# 再执行查找文件的操作

3. 分页切换时未等待页面加载 #

处理完倒数第二个条目后直接点击分页按钮，页面还没加载完成就开始下一轮遍历，会导致最后一个条目被遗漏。

修复：点击分页后等待页面刷新完成，比如等待新的条目列表出现：

next_page_btn.click()
# 等待下一页的条目加载完毕
WebDriverWait(driver, 10).until(
    EC.presence_of_element_located((By.CLASS_NAME, "item-container"))
)

4. 定位器在最后一个条目上失效 #

部分网站最后一个条目可能有特殊的DOM结构（比如额外的class或属性），导致你的XPATH/CSS选择器无法匹配。

修复：用浏览器开发者工具查看最后一个条目的HTML结构，调整定位器确保能匹配所有条目。

内容的提问来源于stack exchange，提问作者T.Programmer