Selenium循环翻页问题：如何基于page_length实现正确for循环

你的核心问题是计数器index_count在for循环内部初始化，导致每次循环都被重置为0，无法累计翻页次数。直接把计数器的初始化移到循环外面就能解决，再配合合理的翻页逻辑，就能实现10页的自动爬取。

问题代码分析 #

你之前的代码大概是这种错误结构：

page_length = 10
for i in range(page_length):
    index_count = 0  # 致命问题：每次循环都重置为0
    # 爬取当前页图片的逻辑
    # ...
    # 尝试用index_count翻页
    index_count +=1
    # 点击翻页按钮

每次进入循环，index_count都会被重新赋值为0，翻页逻辑永远基于0计算，自然无法正确跳转到下一页。

修正后的完整代码示例 #

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
import random
import time

driver = webdriver.Chrome()
driver.get("https://gibiru.com/images")  # 假设初始页是图片搜索结果页

page_length = 10
index_count = 0  # 把计数器移到循环外面，全局累计

for i in range(page_length):
    # 1. 爬取当前页所有图片的src属性
    # 等待图片元素加载完成
    images = WebDriverWait(driver, 10).until(
        EC.presence_of_all_elements_located((By.XPATH, "//img[contains(@class, 'image-result')]"))
    )
    # 提取并处理src
    for img in images:
        src = img.get_attribute("src")
        print(src)  # 替换成你保存/存储的逻辑
    
    # 2. 翻页操作（最后一页不需要翻页）
    if i < page_length - 1:
        index_count += 1
        # 定位翻页按钮：Gibiru的翻页按钮通常用aria-label标注页码，比如"Page 2"
        try:
            next_page_btn = WebDriverWait(driver, 10).until(
                EC.element_to_be_clickable((By.XPATH, f"//a[@aria-label='Page {index_count + 1}']"))
            )
            next_page_btn.click()
            # 等待页面刷新完成（通过判断旧页面的图片元素失效）
            WebDriverWait(driver, 10).until(
                EC.staleness_of(images[0])
            )
            # 随机延迟，规避反爬
            time.sleep(random.uniform(1, 3))
        except Exception as e:
            print(f"翻页失败：{e}")
            break

driver.quit()

关键修复点 #

1. 计数器移至循环外：index_count在for循环开始前初始化，每次翻页时递增，保证翻页次数累计正确。
2. 最后一页跳过翻页：通过if i < page_length -1判断，避免最后一页点击不存在的翻页按钮抛出异常。
3. 强制等待页面加载：用WebDriverWait代替固定sleep，确保元素加载完成后再操作，减少反爬和元素未找到的错误。

额外注意事项 #

• Gibiru有反爬机制，添加随机延迟能降低被封风险。
• 如果翻页按钮定位失败，直接查看页面源码中翻页元素的实际属性，调整XPATH或CSS选择器即可。

内容的提问来源于stack exchange，提问作者AnxiousDino