Python使用BeautifulSoup查找HTML中第二个class为container的div无输出怎么办

问题核心原因 #

• 你提供的HTML结构中，第二个class="container"的div是空元素，内部没有任何<p>标签。header.find_all("p")会返回空列表，后续循环不会执行，因此无输出。
• 如果实际业务场景中该div内部确实存在<p>标签，则是BeautifulSoup解析的源码和预期不一致：你使用selenium的driver获取页面时，没有等待页面完全渲染就提取了源码生成soup对象，此时目标div内部还未加载出<p>元素。

调试修复步骤 #

先执行以下代码确认定位逻辑是否正确：

# 先确认匹配到的container div总数，验证索引[1]是否合法
containers = soup.find_all('div', attrs={'class': 'container'})
print(f"匹配到的container数量：{len(containers)}")
# 打印第二个container的完整结构，确认内部是否存在p标签
print(containers[1].prettify())

# 确认结构符合预期后再执行遍历逻辑
for text in containers[1].find_all("p"):
    print(text.get_text(strip=True))

driver.close()

如果是页面未加载完全的问题，在获取页面前添加显式等待逻辑，等待目标div加载完成后再提取源码解析即可。

内容的提问来源于stack exchange，提问作者Ansh Rathod