Selenium爬取视频标题返回空字符串问题求助

1. 正确的等待语句写法 #

常规等待元素可见的逻辑可能不适用——你遇到的情况是元素存在但文本未渲染，或元素因样式隐藏导致text属性无法读取。可以尝试这两种针对性的等待策略：

• 等待元素文本非空：

  from selenium.webdriver.support.ui import WebDriverWait
  from selenium.webdriver.common.by import By
  
  title_xpath = "替换为你的目标XPATH"
  # 超时设为10秒，等待文本内容不为空
  title_text = WebDriverWait(driver, 10).until(
      lambda d: d.find_element(By.XPATH, title_xpath).text.strip() != ""
  ).text.strip()
  

• 通过JavaScript提取文本：
  如果page_source能看到文本但text方法返回空，大概率是元素被CSS隐藏或未触发渲染，直接用JS读取原始文本内容：

  from selenium.webdriver.support.ui import WebDriverWait
  from selenium.webdriver.support import expected_conditions as EC
  from selenium.webdriver.common.by import By
  
  title_element = WebDriverWait(driver, 10).until(
      EC.presence_of_element_located((By.XPATH, title_xpath))
  )
  title_text = driver.execute_script("return arguments[0].textContent;", title_element).strip()
  

2. 鼠标悬停同时执行元素定位 #

可以用ActionChains实现悬停触发，结合即时抓取避免标题消失：

from selenium.webdriver.common.action_chains import ActionChains
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.common.by import By

# 先定位播放器区域
player_xpath = "替换为播放器XPATH"
player_element = driver.find_element(By.XPATH, player_xpath)

# 鼠标悬停+立即等待文本加载并抓取
ActionChains(driver).move_to_element(player_element).perform()
title_text = WebDriverWait(driver, 5).until(
    lambda d: d.find_element(By.XPATH, title_xpath).text.strip() != ""
).text.strip()

如果标题消失过快，跳过text方法，直接用JS抓取：

ActionChains(driver).move_to_element(player_element).perform()
title_element = driver.find_element(By.XPATH, title_xpath)
title_text = driver.execute_script("return arguments[0].textContent;", title_element).strip()

内容的提问来源于stack exchange，提问作者Edward Noga