如何用Python & Selenium滚动Facebook相册div以加载全部图片

要实现滚动指定div加载全部图片，核心思路是定位目标可滚动容器，然后通过JavaScript循环滚动到底部，直到容器高度不再变化（说明没有新内容加载）。以下是具体实现步骤和代码：

1. 定位目标可滚动Div #

首先要精准定位到你截图中高亮的可滚动容器。Facebook的相册容器通常带有role="list"或特定语义化属性（比如包含“相册”的aria-label），可以用浏览器开发者工具（F12）直接复制目标div的XPath或CSS选择器。示例定位方式：

# 根据实际页面结构调整定位规则
scrollable_div = driver.find_element(By.XPATH, "//div[contains(@aria-label, '相册') and @role='list']")

2. 循环滚动加载内容 #

通过执行JavaScript控制该div滚动，每次滚动到底部后等待新图片加载，重复此过程直到容器高度不再变化，即已加载全部内容。

完整Python代码示例：

from selenium import webdriver
from selenium.webdriver.common.by import By
import time

driver = webdriver.Chrome()
driver.get("你的Facebook相册URL")

# 定位可滚动容器
scrollable_div = driver.find_element(By.XPATH, "//div[contains(@aria-label, '相册') and @role='list']")

last_height = driver.execute_script("return arguments[0].scrollHeight", scrollable_div)

while True:
    # 滚动到div底部
    driver.execute_script("arguments[0].scrollTop = arguments[0].scrollHeight", scrollable_div)
    
    # 等待新内容加载（可根据网络情况调整时长）
    time.sleep(2)
    
    # 获取当前div滚动高度
    new_height = driver.execute_script("return arguments[0].scrollHeight", scrollable_div)
    
    # 高度不变则说明已加载完成，退出循环
    if new_height == last_height:
        break
    last_height = new_height

# 此时所有图片已加载，可开始爬取
images = scrollable_div.find_elements(By.TAG_NAME, "img")
for img in images:
    print(img.get_attribute("src"))

3. 关键注意事项 #

• 反爬适配：Facebook有反爬机制，建议用随机延时（比如random.uniform(1,3)替代固定sleep）模拟人类操作间隔，避免触发验证。
• 显式等待优化：若页面加载缓慢，改用显式等待定位元素，避免报错：

  from selenium.webdriver.support.ui import WebDriverWait
  from selenium.webdriver.support import expected_conditions as EC
  
  scrollable_div = WebDriverWait(driver, 10).until(
      EC.presence_of_element_located((By.XPATH, "//div[contains(@aria-label, '相册') and @role='list']"))
  )
  

• 避免依赖动态类名：Facebook元素类名会动态变化，优先用aria-label、role这类语义化属性定位。

内容的提问来源于stack exchange，提问作者Mr.Bhanuka