使用WebDriver在Perlego爬取图书时无法找到可点击元素的问题

• 检查iframe嵌套
  先确认搜索结果是否被嵌套在iframe中。很多网站会把核心内容放在iframe里，需先切换到对应iframe再定位元素：

  # 示例：通过索引或iframe的id/name切换
  driver.switch_to.frame(0)
  # 执行元素定位操作...
  # 操作完成后切回主文档
  driver.switch_to.default_content()
  

• 使用显式等待确保元素加载完成
  静态等待（sleep）稳定性差，改用显式等待直到元素可点击：

  from selenium.webdriver.support.ui import WebDriverWait
  from selenium.webdriver.support import expected_conditions as EC
  from selenium.webdriver.common.by import By
  
  # 等待10秒，直到图书卡片的可点击链接出现
  book_link = WebDriverWait(driver, 10).until(
      EC.element_to_be_clickable((By.XPATH, "//div[contains(@class, 'book-card')]//a"))
  )
  book_link.click()
  

• 尝试更稳定的元素定位方式
  如果常规class/id定位失效，用xpath或css selector定位核心区域：

  • 按图书标题关联的链接定位：//h3[contains(text(), '目标图书标题')]/parent::a
  • 按封面容器的父链接定位：//div[contains(@class, 'book-cover')]/parent::a

• 滚动到元素位置后再点击
  元素可能处于视口外导致点击失败，先滚动到元素位置：

  driver.execute_script("arguments[0].scrollIntoView();", book_link)
  book_link.click()
  

• 直接构造详情页URL（替代点击操作）
  若以上方法都无效，可提取图书链接的href属性直接跳转：

  book_url = book_link.get_attribute('href')
  driver.get(book_url)
  

注意：爬取网站内容前，请严格遵守网站的robots.txt协议及相关法律法规，避免违规操作。

内容的提问来源于stack exchange，提问作者Darman