在MeteorJs Galaxy用Puppeteer爬取YouTube Shorts遇ProtocolError求助

• 首先明确：Puppeteer的几乎所有核心方法（launch、newPage、goto、waitForSelector等）都返回Promise，它们是异步操作，不会立即完成。
• Async/Await是Promise的语法糖，让异步代码更易读：
  • 只有在async标记的函数内部才能使用await关键字
  • 用await等待Promise完成，拿到实际返回值（比如const browser = await puppeteer.launch()拿到的是浏览器实例，而非Promise对象）
  • 所有await操作必须用try/catch包裹，否则Promise的失败会变成未捕获的错误
• 举个Puppeteer场景下的正确写法：

async function crawlShorts() {
  let browser;
  try {
    browser = await puppeteer.launch({ /* 配置参数 */ });
    const page = await browser.newPage();
    await page.goto('https://www.youtube.com/目标频道/shorts');
    // 等待Shorts元素加载完成
    await page.waitForSelector('ytd-reel-video-renderer', { timeout: 30000 });
    // 提取数据
    const shortsList = await page.evaluate(() => {
      return Array.from(document.querySelectorAll('ytd-reel-video-renderer')).map(item => ({
        title: item.querySelector('#video-title').textContent.trim(),
        link: item.querySelector('a').href
      }));
    });
    // 必须等所有操作完成再关闭浏览器
    await browser.close();
    return shortsList;
  } catch (err) {
    console.error('爬取失败:', err);
    // 出错时也要确保浏览器关闭，避免资源泄漏
    if (browser) await browser.close();
  }
}

这个错误基本是浏览器实例提前关闭或操作与浏览器生命周期不匹配导致的，结合Meteor Galaxy环境，按以下步骤排查：

• 检查异步执行顺序：确保所有依赖浏览器/页面的操作都在await browser.close()前完成，绝对不能在未await完爬取逻辑时就关闭浏览器
• 配置Puppeteer适配Galaxy容器环境：Galaxy是无头容器，必须设置正确的启动参数：

const browser = await puppeteer.launch({
  headless: 'new', // Puppeteer v19+推荐的无头模式，旧版可设为true
  args: [
    '--no-sandbox',
    '--disable-setuid-sandbox',
    '--disable-dev-shm-usage', // 解决容器内存不足问题
    '--disable-gpu' // 无头环境无需GPU加速
  ]
});

• 增加超时控制：页面加载或元素等待时设置合理超时，避免因网络延迟导致连接断开：

await page.goto('目标URL', { timeout: 60000 }); // 60秒超时
await page.waitForSelector('目标选择器', { timeout: 30000 });

• 规范Meteor方法的异步处理：Meteor支持async函数，直接将爬取逻辑放在async方法中，无需使用旧版的Meteor.wrapAsync
• 避免重复创建浏览器实例：如果是高频调用的Meteor方法，可考虑复用浏览器实例（需注意并发问题），或确保每次调用都完整执行「打开→爬取→关闭」流程

内容的提问来源于stack exchange，提问作者Hafiz Hanif