如何在BeautifulSoup循环中提取嵌套标签内的文本？

针对你遇到的提取item-aboutUs div内a标签文本的问题，尤其是存在多个该类div的场景，可以通过遍历每个item-aboutUs元素，再定位内部a标签的方式解决，同时加入异常处理避免找不到标签时报错。

修改后的核心代码片段 #

替换你原代码中处理descriptions的部分：

# 遍历当前item-details下的所有item-aboutUs div
for desc_div in div.find_all('div', class_='item-aboutUs'):
    # 查找当前div内的a标签
    a_tag = desc_div.find('a')
    if a_tag:
        # 提取a标签文本并去除首尾空格
        desc_text = a_tag.text.strip()
        print(desc_text)
    else:
        # 没有a标签时的处理（可选）
        print("无描述链接文本")

完整优化代码 #

如果需要把所有描述文本整理成列表，或者做更规范的异常处理，完整代码可以这样写：

pagecount = 1
driver = webdriver.Chrome()
page_url = f"{base_url}/en/category/abrasives/p{pagecount}"
driver.get(page_url) 
driver.implicitly_wait(10) 
page_source = driver.page_source

# 建议用显式等待代替time.sleep，更高效（需导入对应模块）
# from selenium.webdriver.support.ui import WebDriverWait
# from selenium.webdriver.support import expected_conditions as EC
# from selenium.webdriver.common.by import By
# WebDriverWait(driver, 10).until(EC.presence_of_element_located((By.CLASS_NAME, "item-details")))

bs = BeautifulSoup(page_source, 'html.parser')
divs = bs.find_all('div', class_ = 'col-xs-12 item-details')

for div in divs:
    # 提取图片链接
    img_tag = div.find('img')
    img_src = img_tag['data-src'].strip() if img_tag else "无图片"
    print(f"图片链接: {img_src}")
    
    # 提取标题
    title_tag = div.find('a', class_ = 'item-title')
    title = title_tag.text.strip() if title_tag else "无标题"
    print(f"标题: {title}")
    
    # 提取地址
    address_tag = div.find('a', class_ = 'address-text')
    address = address_tag.find('span').text.strip() if address_tag and address_tag.find('span') else "无地址"
    print(f"地址: {address}")
    
    # 提取所有item-aboutUs内的a标签文本
    desc_texts = []
    for desc_div in div.find_all('div', class_='item-aboutUs'):
        a_tag = desc_div.find('a')
        if a_tag:
            desc_texts.append(a_tag.text.strip())
    
    # 输出结果，可根据需求调整格式
    print(f"描述文本列表: {desc_texts}")
    print("---")

关键优化点 #

1. 遍历+精准定位：通过div.find_all('div', class_='item-aboutUs')获取当前商家下的所有描述div，再逐个查找内部a标签，确保不遗漏任何一个。
2. 异常处理：对每个标签的查找结果做判空处理，避免因页面结构变化（比如某个商家没有描述、没有地址）导致代码崩溃。
3. 结果整理：将所有描述文本存入列表，方便后续存储或分析，而不是零散打印。

内容的提问来源于stack exchange，提问作者bc220425092 MUHAMMAD HASSAN SA