Python嵌套链接爬取遇AttributeError问题求助

Hey Rachel，刚实习第一天就啃爬虫任务真的超勇敢！别慌，这个错误其实是BeautifulSoup最常见的新手坑之一，我帮你拆解清楚～

问题根源：你把「列表」当成了「单个元素」 #

你报错里的all_links是用find_all()获取的ResultSet对象——本质就是一堆标签组成的列表。比如你用soup.find_all('a')，得到的是页面上所有标签的集合，不是某一个单独的链接标签。

针对你的任务的解决方案 #

你的目标是：主页面链接 → 进入链接找日期列表区域 → 抓日期链接 → 爬PDF。那我们需要遍历all_links里的每个链接，逐个处理：

步骤1：先正确获取并过滤主页面的目标链接 #

首先，你可能需要先过滤掉不需要的链接（比如导航栏、无关页的链接），只保留指向会议日期页的链接。比如可以通过href里的关键词（比如live_meetings）来筛选：

import requests
from bs4 import BeautifulSoup

# 主页面请求
main_url = "https://www.gmcameetings.co.uk/"
response = requests.get(main_url)
soup = BeautifulSoup(response.text, 'html.parser')

# 只获取包含目标关键词的<a>标签（比如你例子里的live_meetings）
target_links = soup.find_all('a', href=lambda href: href and 'live_meetings' in href)

步骤2：遍历每个目标链接，进入子页面找日期区域 #

现在target_links是符合要求的链接列表，我们需要逐个遍历，对每个链接对应的页面发起请求，再找那个ul.item-list item-list--rich区域：

import time

for link in target_links:
    # 获取子页面的URL
    sub_url = link['href']
    # 处理相对链接（如果有的话）
    if not sub_url.startswith('http'):
        sub_url = main_url + sub_url
    
    try:
        # 请求子页面，加一点延迟避免触发反爬
        time.sleep(1)
        sub_response = requests.get(sub_url)
        sub_response.raise_for_status()  # 检查请求是否成功
        sub_soup = BeautifulSoup(sub_response.text, 'html.parser')
        
        # 现在可以用find()找目标ul了！因为sub_soup是单个页面的解析对象
        date_links_area = sub_soup.find('ul', class_="item-list item-list--rich")
        
        # 如果找到这个区域，继续提取日期链接
        if date_links_area:
            # 提取区域里的所有<a>标签（日期链接）
            date_links = date_links_area.find_all('a')
            for date_link in date_links:
                # 这里就可以继续处理日期页面里的PDF了
                pdf_page_url = date_link['href']
                # 后续PDF下载逻辑...
                print(f"找到PDF页面链接：{pdf_page_url}")
        else:
            print(f"子页面 {sub_url} 没有找到日期列表区域")
    except Exception as e:
        print(f"处理链接 {sub_url} 时出错：{str(e)}")

额外新手提示 #

• 异常处理很重要：比如请求页面失败（网络问题）、链接没有href属性，加try-except能避免程序直接崩溃
• 记得加延迟：用time.sleep()控制请求频率，避免被网站临时封禁
• 先小范围测试：比如先只处理target_links[0]，确认逻辑没问题再批量跑，这样更容易排查问题

这样改完，应该就能解决你遇到的AttributeError问题啦～如果还有其他小细节卡壳，随时再梳理！

内容的提问来源于stack exchange，提问作者Rachel9866