You need to enable JavaScript to run this app. Python爬虫:如何使用BeautifulSoup提取hh.ru目标a标签的文本内容
优惠活动
大模型
产品
解决方案
定价
更多

Python爬虫:如何使用BeautifulSoup提取hh.ru目标a标签的文本内容

文本提取实现方案

BeautifulSoup 本身就提供了直接提取标签内部文本的能力,完全不需要手动定位target="_blank"属性的字符位置、通过字符串切片截取内容——你要提取的内容本身就是a标签节点的文本内容,DOM解析后可以直接获取。

核心提取方法

对每一个匹配到的a标签元素,直接调用内置的文本相关属性/方法就能拿到目标内容:

  • 对于当前这种a标签直接包含纯文本的场景,使用.text属性即可一步提取:
    # 批量提取所有匹配标签的文本,清理首尾多余空白
    vacancy_titles = [tag.text.strip() for tag in scrape]
    
    该方法会自动跳过a标签的所有属性节点,精准提取标签起始>符号之后、</a>闭合标签之前的全部文本,完全匹配你的提取需求。
  • 如果后续遇到标签内部嵌套子节点(比如标题中夹杂高亮标签、职位等级图标等元素),可以使用兼容性更强的.get_text()方法处理嵌套文本:
    # 自动拼接嵌套节点的文本,统一清理空白字符
    vacancy_titles = [tag.get_text(strip=True, separator=" ") for tag in scrape]
    
    这个方法相比.text的优势是,可以自定义不同子节点文本的拼接分隔符,自动处理嵌套结构的文本聚合,不会出现提取内容截断的问题。

现有代码的问题修正

你当前的选择器存在一处笔误:匹配的类名写为bloko-link HH-LinkModifie,实际页面上的类名是bloko-link HH-LinkModifier(末尾缺失字母r),这个错误会导致findAll无法匹配到正确的DOM节点,最终返回空列表,修正后即可正常匹配目标元素。

注意:不推荐手动将标签对象转为字符串,通过查找target="_blank"的位置做切片提取。这种方式的稳定性极差,只要页面调整了属性顺序、给标签增加了其他属性,就会直接提取失败。BeautifulSoup的DOM解析已经对标签的属性、子节点、文本节点做了严格的逻辑分离,直接调用内置方法的健壮性远高于手动字符串处理。


内容的提问来源于stack exchange,提问作者AlexCCIE

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.11.03 13:06:07