Python Requests：Cookie文件保存复用后次日失效问题求助

核心问题 #

使用pickle保存requests.Session的Cookies后，首次加载可正常复用，次日则失效，重新保存也无法恢复登录状态。

可能原因与解决方案 #

1. Cookie存在过期或会话有效期限制 #

网站登录Cookie通常会设置过期时间（expires/max-age属性），或服务端维护会话有效期，超时后旧Cookie会被标记无效。

• 解决办法：
  • 加载Cookie后先发起验证请求（如访问个人信息页），通过返回状态码/内容判断登录状态。
  • 验证失败时自动触发重新登录，覆盖旧Cookie文件。
  • 示例代码：

    def check_login_status(self):
        response = self.api.session.get("https://example.com/user/profile")
        if "请登录" in response.text or response.status_code == 401:
            self.login()  # 调用已有的登录逻辑
            self.__save_user_cookies_file__()  # 重新保存有效Cookie
    

2. pickle序列化丢失关键Cookie属性 #

requests.cookies.RequestsCookieJar被pickle序列化时，可能丢失domain/path/secure等服务端依赖的属性，导致加载后Cookie无法被正确识别。

• 解决办法：
  • 改用字典格式保存Cookie，加载时重新构建CookieJar：

    def __save_user_cookies_file__(self) -> None:
        file_name = f'{self.user}_cookies'
        cookies_dict = self.api.session.cookies.get_dict()
        with open(file_name, 'w') as f:
            json.dump(cookies_dict, f)
    
    def __load_user_cookies_file__(self) -> None:
        file_name = f'{self.user}_cookies'
        with open(file_name, 'r') as f:
            cookies_dict = json.load(f)
        for key, value in cookies_dict.items():
            self.api.session.cookies.set(key, value)
    

  • 若需保留完整属性，可将Cookie转换为字典列表保存：

    def __save_user_cookies_file__(self) -> None:
        file_name = f'{self.user}_cookies'
        cookies_list = [{'name': c.name, 'value': c.value, 'domain': c.domain, 'path': c.path} for c in self.api.session.cookies]
        with open(file_name, 'w') as f:
            json.dump(cookies_list, f)
    
    def __load_user_cookies_file__(self) -> None:
        file_name = f'{self.user}_cookies'
        with open(file_name, 'r') as f:
            cookies_list = json.load(f)
        for cookie in cookies_list:
            self.api.session.cookies.set(**cookie)
    

3. 服务端绑定Cookie与客户端环境 #

部分网站会将Cookie与IP、User-Agent等信息绑定，环境变化（如IP变更、User-Agent不一致）时旧Cookie失效。

• 解决办法：
  • 保存Cookie时同步保存登录用的User-Agent，加载后设置相同值：

    def __save_user_cookies_file__(self) -> None:
        file_name = f'{self.user}_cookies'
        data = {
            'cookies': self.api.session.cookies.get_dict(),
            'user_agent': self.api.session.headers.get('User-Agent')
        }
        with open(file_name, 'w') as f:
            json.dump(data, f)
    
    def __load_user_cookies_file__(self) -> None:
        file_name = f'{self.user}_cookies'
        with open(file_name, 'r') as f:
            data = json.load(f)
        self.api.session.headers['User-Agent'] = data['user_agent']
        for key, value in data['cookies'].items():
            self.api.session.cookies.set(key, value)
    

  • 确保请求IP与登录时一致，必要时使用固定代理。

4. 网站启用动态验证机制 #

部分网站登录后生成动态CSRF Token，Token过期后请求会被拒绝，仅复用Cookie无法解决。

• 解决办法：
  • 加载Cookie后访问含CSRF Token的页面，提取最新Token并更新到请求头/参数：

    def update_csrf_token(self):
        response = self.api.session.get("https://example.com/dashboard")
        csrf_token = re.search(r'<meta name="csrf-token" content="(.*?)">', response.text).group(1)
        self.api.session.headers['X-CSRF-Token'] = csrf_token
    

内容的提问来源于stack exchange，提问作者yad2 reporter