Node.js爬虫无法在函数外部获取titleList返回值的解决方案咨询

你遇到的核心问题是异步代码的执行顺序导致的结果无法同步获取——then()里的回调是异步执行的，当你尝试在外部直接访问结果时，回调内的逻辑可能还没跑完，自然拿不到值。下面给你两种实用的解决方案：

方案一：用async/await统一处理（最推荐，代码更简洁易读） #

把整个爬取+解析的逻辑封装到一个异步函数里，用await等待所有异步操作完成，就能直接在函数内获取titleList，后续在需要的地方调用这个函数即可：

const axios = require("axios");
const cheerio = require('cheerio');

async function getHTML() {
  try {
    return await axios.get("https://google.com");
  } catch (error) {
    console.error(error);
    throw error; // 抛出错误让上层处理，避免静默失败
  }
}

async function getTitleList() {
  try {
    const html = await getHTML();
    const $ = cheerio.load(html.data);
    const titleList = [];
    const bodyList = $("ul.new_quickMenu_list");
    
    bodyList.find("li").each(function(i, elem) {
      titleList[i] = { 
        title : $(this).find("span").text() 
      };
    });
    
    return titleList;
  } catch (err) {
    console.error('获取标题列表失败:', err);
    return []; // 出错时返回空数组，保证上层能拿到有效值
  }
}

// 在主函数里调用并使用结果
async function main() {
  const titleList = await getTitleList();
  // 这里就可以在原then回调的外部使用titleList了
  console.log('获取到的标题列表:', titleList);
  // 后续所有需要用到titleList的逻辑都可以放在这里
}

main();

方案二：将解析逻辑包装为Promise，按需获取结果 #

如果不想新增太多函数，也可以把生成titleList的逻辑包装成一个Promise变量，之后在需要的地方用then()或await获取结果：

const axios = require("axios");
const cheerio = require('cheerio');

async function getHTML() {
  try {
    return await axios.get("https://google.com");
  } catch (error) {
    console.error(error);
    throw error;
  }
}

// 把获取titleList的逻辑包装成一个Promise
const titleListPromise = getHTML().then(html => {
  let titleList = [];
  const $ = cheerio.load(html.data);
  const bodyList = $("ul.new_quickMenu_list");
  
  bodyList.find("li").each(function(i, elem) {
    titleList[i] = { 
      title : $(this).find("span").text() 
    };
  });
  
  return titleList;
});

// 方式1：用then()链式调用获取结果
titleListPromise.then(titleList => {
  console.log('通过then获取的标题列表:', titleList);
});

// 方式2：在异步上下文里用await获取结果
// (async () => {
//   const titleList = await titleListPromise;
//   console.log('通过await获取的标题列表:', titleList);
// })();

为什么原代码拿不到结果？ #

你之前的代码里，titleList是then()回调内部的局部变量，外部根本访问不到；就算你把titleList声明在外部，同步代码也会比异步回调先执行，导致你读取的时候它还是空的——这是JavaScript事件循环机制的特性，异步回调会等所有同步代码执行完才会运行。

处理异步代码一定要遵循异步的规则：要么用then()链式处理，要么用async/await把异步代码“同步化”书写，不要试图用同步的方式去获取异步操作的结果。

内容的提问来源于stack exchange，提问作者Ulegi