每日首次运行Nightmare JS脚本出现Navigation Error -3问题求助

1. 问题成因及解决办法 #

可能成因 #

Navigation Error -3对应Electron底层的ERR_ABORTED（导航被中止），结合仅每日首次运行触发的特征，常见原因包括：

• Electron初始化延迟：首次启动Electron进程需要加载浏览器内核、初始化环境，默认导航超时时间可能不足以完成首次页面加载，导致导航被中止。
• Chrome沙箱兼容性问题：部分系统环境下，Electron首次启动时的沙箱机制可能触发权限或资源加载异常，中断导航。
• 目标站点反爬拦截：首次请求无任何会话/Cookie信息，被站点的反爬规则识别为异常请求并拦截。
• Electron缓存/用户数据干扰：首次启动时加载的旧缓存或残留用户数据导致页面加载异常。

解决办法 #

• 延长导航超时时间：在goto方法中单独设置更长的超时，给首次初始化留足时间：

  nightmare.goto('你的首页URL', {timeout: 10000}) // 设置为10秒
  

• 禁用Chrome沙箱：启动Nightmare时添加沙箱禁用参数，避免环境兼容性问题：

  const nightmare = Nightmare({
    switches: {'no-sandbox': true}
  });
  

• 预热Electron进程：脚本开头先启动一个空实例预热，再启动实际爬取逻辑：

  // 预热进程
  Nightmare().end().then(() => {
    // 延迟1秒后启动爬取
    setTimeout(runActualScraper, 1000);
  });
  
  function runActualScraper() {
    // 你的爬取逻辑
  }
  

• 模拟浏览器请求特征：添加真实UA、请求头，或首次请求前先加载静态资源预热会话：

  nightmare
    .useragent('Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/114.0.0.0 Safari/537.36')
    .goto('目标站点静态资源URL') // 比如站点的favicon
    .wait(500)
    .goto('你的首页URL')
  

• 使用临时用户数据目录：避免旧缓存干扰，每次运行生成独立的临时目录：

  const path = require('path');
  const tempDir = path.join(__dirname, 'temp-electron-' + Date.now());
  const nightmare = Nightmare({
    userDataPath: tempDir
  });
  // 脚本结束后可删除临时目录
  

2. 报错自动停止并重启脚本的实现方案 #

代码内重启逻辑（Node.js内置实现） #

封装爬取逻辑，捕获指定错误后重启进程，同时限制重启次数避免无限循环：

const Nightmare = require('nightmare');
const { spawn } = require('child_process');

// 从环境变量获取重启次数，默认0
const restartCount = parseInt(process.env.RESTART_COUNT || '0');
const MAX_RESTARTS = 3;

function runScraper() {
  const nightmare = Nightmare({
    switches: {'no-sandbox': true},
    timeout: 15000
  });

  nightmare
    .goto('你的首页URL', {timeout: 10000})
    .then(() => {
      console.log('导航成功，开始执行爬取逻辑');
      // 后续爬取操作...
      return nightmare.end();
    })
    .then(() => {
      console.log('爬取完成，正常退出');
      process.exit(0);
    })
    .catch(err => {
      console.error('爬取失败:', err.message);
      nightmare.end().then(() => {
        // 判断是否为目标错误
        if (err.message.includes('Navigation Error -3') && restartCount < MAX_RESTARTS) {
          console.log(`检测到目标错误，第${restartCount + 1}次重启...`);
          // 设置环境变量传递重启次数
          spawn(process.execPath, process.argv, {
            stdio: 'inherit',
            env: {...process.env, RESTART_COUNT: restartCount + 1}
          });
          process.exit(0);
        } else {
          console.log('达到最大重启次数或非目标错误，停止执行');
          process.exit(1);
        }
      });
    });
}

runScraper();

外部监控脚本（Windows批处理示例） #

如果不想修改Node.js代码，可通过批处理脚本监控运行状态，失败时自动重启：

@echo off
setlocal enabledelayedexpansion
set "restart_count=0"
set "max_restarts=3"
set "script_path=your-scraper.js"

:RESTART_LOOP
echo 启动脚本...
node "%script_path%"
if %errorlevel% equ 0 (
  echo 脚本执行成功，退出
  exit /b 0
) else (
  set /a restart_count+=1
  if !restart_count! leq %max_restarts% (
    echo 脚本执行失败，第!restart_count!次重启（等待5秒）...
    timeout /t 5 /nobreak >nul
    goto RESTART_LOOP
  ) else (
    echo 重启次数超过%max_restarts%次，停止
    exit /b 1
  )
)

将任务计划程序的执行目标改为这个批处理文件即可。

内容的提问来源于stack exchange，提问作者Jonathan Bromell