如何通过Facebook视频ID获取视频信息？scrape遇登录限制是否该选用Puppeteer？

你现在用got发纯HTTP请求时频繁被重定向到登录页，本质是Facebook的反爬机制对无浏览器特征的裸请求做了强拦截：哪怕是完全公开的视频内容，只要请求没有携带合法的浏览器指纹、平台下发的匿名校验cookie，服务端就会直接返回登录页，你之前写的基于字符串分割的解析逻辑自然拿不到视频相关字段。

• Puppeteer这类Headless浏览器是当前场景下稳定性最高的实现路径，可以根据你的部署需求做轻量化取舍
  1. 轻量折中方案（低依赖但稳定性弱）
     给got补全和真实浏览器完全一致的请求头：包括最新版本的Chrome UA、全量Sec-Fetch-*系列头、标准Accept头，首次访问时不要携带任何身份凭证，先把平台下发的匿名set-cookie值存下来，后续带着这个cookie重访视频页，能绕开部分公开视频的登录拦截。但这个方案容错率极低，Facebook随时可以调整校验规则，遇到主页发布、粉丝可见范围的视频，依然会被强制跳登录。
  2. 稳定实现方案（Headless浏览器）
     Puppeteer这类工具会模拟完整的真实浏览器请求链路，自动处理cookie下发、基础指纹校验，访问公开视频页时几乎不会触发登录重定向，长期运行的稳定性远高于纯HTTP请求方案。
     落地时需要注意：
  • 彻底替换你现在写的字符串split解析逻辑：Facebook视频页的DOM中会内嵌结构化的全局JSON数据块，直接提取这个JSON块做解析，就能直接拿到视频标题、视频ID、多清晰度下载直链、缩略图地址，比靠字段位置硬拆字符串的容错率高很多。
  • 浏览器模式配置为new无头模式，和真实浏览器的行为完全一致，不需要做复杂的反爬绕过就能访问大部分公开视频内容。
  • 如果需要访问需要登录才能查看的非公开视频，可以提前在Puppeteer环境完成一次登录，把登录态的cookie缓存到本地，后续复用这个状态访问页面，就不会反复触发登录跳转。

合规提示：爬取内容时请遵守Facebook的平台规则与相关法律法规，不要抓取受权限保护的非公开内容。

内容的提问来源于stack exchange，提问作者Huy Hoang Nguyen