如何使用BeautifulSoup在现有代码结构下提取a标签的超链接地址

不改动现有代码整体结构的前提下，仅补充a标签属性取值逻辑，即可同时拿到页面元素的展示文本和对应超链接。

核心实现逻辑 #

BeautifulSoup解析生成的标签对象，可直接通过字典索引的方式读取自身携带的HTML属性：

• 原有代码里的data.a.text，读取的是a标签包裹的页面可见展示文本
• 对应a标签上的超链接存在href属性中，直接用data.a['href']就能拿到完整链接地址，不需要额外解析步骤

修改后的循环代码 #

将原有循环内的输出逻辑替换为以下内容，即可同时获取两类目标数据：

for data in container:
    # 提取a标签的展示文本，用strip()去掉首尾多余空格
    display_text = data.a.text.strip()
    # 提取a标签对应的超链接地址
    target_url = data.a['href']
    # 可按需调整输出格式
    print(f'{display_text}\n{target_url}\n')

可选兼容优化 #

如果后续爬取时遇到个别容器块内不存在a标签的情况，可增加简单的判空逻辑避免程序运行中断：

for data in container:
    target_a = data.a
    # 跳过无a标签的异常容器块
    if not target_a:
        continue
    display_text = target_a.text.strip()
    target_url = target_a['href']
    print(f'{display_text}\n{target_url}\n')

如果需要把提取结果写入之前导入的csv文件，直接将上述两个提取到的变量作为行内容传入csv的写入方法即可，完全不需要改动已有的页面请求、soup初始化、容器定位的流程结构。

内容的提问来源于stack exchange，提问作者Harsh Wardhan