Python Selenium能否仅通过父div类名一次性抓取所有子div内的文本？

完全可以仅通过定位parent example类的父div，一次性提取其下所有嵌套child example子div的文本内容，无需单独遍历定位每一个子元素。

具体实现方案 #

1. 合并提取所有子元素的整体文本 #

直接在定位到父元素后调用Selenium元素的.text属性即可，该属性会自动递归提取当前元素DOM子树范围内所有嵌套子元素的可见文本，无论子元素的类名、嵌套层级是什么，只要属于该父元素的子节点范围，都会被一并抓取。
示例代码：

from selenium import webdriver
from selenium.webdriver.common.by import By

driver = webdriver.Chrome()
# 定位目标父div
parent_ele = driver.find_element(By.CSS_SELECTOR, "div.parent.example")
# 一次性提取子树内全部文本
full_text = parent_ele.text

2. 分离子元素单独提取每个子div的文本 #

如果需要将4个child example子div的文本拆分为独立条目，仍可以先定位父元素，再在父元素的DOM范围内做相对位置查找，无需从页面全局重新定位：
示例代码：

# 基于已定位的父元素，在其子树内查找所有目标子div
child_ele_list = parent_ele.find_elements(By.CSS_SELECTOR, "div.child.example")
# 逐个提取文本生成列表
each_child_text = [ele.text for ele in child_ele_list]

常见踩坑提醒 #

• 类名定位时，因为parent和example是同一个div上的两个并列类值，书写CSS选择器时不要在两个类名之间加空格，要拼接为div.parent.example，否则会出现定位范围扩大、匹配错误元素的问题。
• 如果出现提取文本为空的情况，优先排查两个问题：一是是否父元素还未完成页面渲染加载就执行了提取操作，可通过显式等待确保元素可见后再执行提取；二是目标文本是否属于元素的隐藏内容，.text属性默认仅提取用户可见的渲染文本，不会抓取被CSS隐藏的节点内容。
  显式等待的示例代码：

from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

# 最长等待10秒，直到父元素可见
parent_ele = WebDriverWait(driver, 10).until(
    EC.visibility_of_element_located((By.CSS_SELECTOR, "div.parent.example"))
)
full_text = parent_ele.text

内容的提问来源于stack exchange，提问作者Sergio Gonzalez Forseck