You need to enable JavaScript to run this app.
优惠活动
大模型
产品
解决方案
定价
更多

网页表格爬取难题:多层嵌套类定位问题

爬取目标表格的实操步骤
  • 先从你提取的body内容里定位表格特征:找目标表格独有的class/id属性,或者它所在父容器的标识。比如表格有唯一class,直接用代码定位:
    from bs4 import BeautifulSoup
    soup = BeautifulSoup(body_content, 'html.parser')
    target_table = soup.find('table', class_='目标表格的类名')
    
  • 要是表格没有唯一标识,先定位包裹它的父元素(比如某个div),再从父元素里找表格:
    parent_container = soup.find('div', class_='父容器类名')
    target_table = parent_container.find('table') if parent_container else None
    
  • 找到表格后,遍历提取内容:
    if target_table:
        # 遍历所有行
        for row in target_table.find_all('tr'):
            # 获取每行的单元格(表头用th,内容用td)
            cells = row.find_all(['td', 'th'])
            # 提取单元格文本并清理空格
            row_data = [cell.get_text(strip=True) for cell in cells]
            print(row_data)
    else:
        print("未定位到目标表格")
    
  • 不确定类名是否正确时,先列出页面所有表格,对比内容找目标:
    all_tables = soup.find_all('table')
    for idx, table in enumerate(all_tables):
        print(f"第{idx+1}个表格内容预览:")
        print(table.get_text(strip=True)[:200])  # 打印前200个字符预览
    

内容的提问来源于stack exchange,提问作者asimo

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.08.21 15:25:44