使用Python3+Selenium无法获取完整Cookie列表的问题求助

以下是针对该问题的具体解决思路：

• 用CDP获取全量Cookie，突破Selenium默认范围限制
  Selenium的driver.get_cookies()仅能获取当前页面对应域名/路径下的Cookie，像_ga、didomi_token这类跨域或延迟设置的Cookie会被遗漏。改用Chrome DevTools Protocol（CDP）可以获取会话内所有Cookie：

  # 调用CDP接口获取所有Cookie
  all_cookies = driver.execute_cdp_cmd('Network.getAllCookies', {})
  # 转换为requests兼容的键值对格式
  cookie_dict = {cookie['name']: cookie['value'] for cookie in all_cookies['cookies']}
  

  这个方法能覆盖所有域、所有路径下的Cookie，包括统计类、隐私授权类的令牌。

• 等待异步Cookie加载完成再提取
  _ga、euconsent-v2这类Cookie通常是页面加载后通过异步脚本动态设置的，直接在页面渲染完成后提取会漏掉这些数据。可以用显式等待确保目标Cookie生成：

  from selenium.webdriver.support.ui import WebDriverWait
  
  # 等待10秒，直到euconsent-v2 Cookie出现（可替换为其他缺失的Cookie名）
  WebDriverWait(driver, 10).until(
      lambda d: any(c['name'] == 'euconsent-v2' for c in d.get_cookies())
  )
  # 此时再提取Cookie
  cookies = driver.get_cookies()
  

  也可以临时加time.sleep(5)让脚本有足够时间执行，但显式等待更可靠。

• 修正requests的Cookie格式
  你提供的requests代码中，Cookie字典的写法有误，正确的格式是每个Cookie作为独立的键值对，而非把所有Cookie拼成字符串：

  # 错误示例
  # cookies = {"cookies" : "_csn_: accepted, _cpn_: accepted....... etc.,"}
  
  # 正确示例
  cookie_dict = {
      "csn": "accepted",
      "cpn": "accepted",
      "_ga": "GA1.2.xxxxxx.xxxxxx",
      "euconsent-v2": "xxxxxx",
      # 其他缺失的Cookie...
  }
  response = requests.get(api_url, headers=headers, cookies=cookie_dict, timeout=2)
  

  格式错误会导致requests无法正确传递Cookie，即便Cookie全量也会认证失败。

• 检查浏览器驱动的运行环境
  确保Selenium驱动没有启用无痕/隐私模式，这类模式会限制第三方Cookie的存储。同时确认访问的是HTTPS站点，部分带Secure属性的Cookie只能在HTTPS环境下被获取。

内容的提问来源于stack exchange，提问作者smokinjim