Node.js中如何使用Mongoose将数据库全量数据转换为数组

基础实现（适合数据量<10w的小集合场景） #

Mongoose的find()方法传入空查询条件即可匹配集合内所有文档，默认返回的结果本身就是标准JS数组，可直接供业务逻辑调用。推荐搭配lean()使用，跳过Mongoose文档实例化步骤，查询性能可提升数倍。
示例代码：

const mongoose = require('mongoose');
// 提前完成MongoDB连接，初始化对应数据模型，以下示例为用户信息模型
const User = mongoose.model('User', new mongoose.Schema({
  username: String,
  age: Number,
  registerTime: Date
}));

// 查询全量数据的方法
async function fetchAllUsers() {
  try {
    // 空条件匹配全量，lean()返回普通JS对象而非Mongoose文档实例
    const userArray = await User.find({}).lean();
    // userArray就是目标数组，可直接传入后续业务逻辑处理
    return userArray;
  } catch (err) {
    // 按需处理查询异常，比如打印错误日志、抛出业务自定义错误
    console.error('全量用户查询失败:', err);
    throw err;
  }
}

// 业务侧调用示例
async function runBusinessLogic() {
  const allUserData = await fetchAllUsers();
  console.log('全量数据条数:', allUserData.length);
  // 后续直接遍历allUserData做统计、计算、导出等操作即可
}

大数据量场景实现（单集合数据量>10w） #

数据量较大时禁止一次性拉取全量数据，会导致Node.js进程内存溢出、MongoDB实例连接阻塞，需要用游标分批拉取数据：

async function fetchAllUsersInBatches() {
  const resultArray = [];
  // 配置每次拉取的批次大小，根据单条数据大小调整，建议单批次数据总大小不超过16MB
  const cursor = User.find({}).lean().cursor({ batchSize: 1000 });

  // 逐批遍历游标拉取数据
  for await (const singleDoc of cursor) {
    resultArray.push(singleDoc);
    // 如果不需要把所有数据存在数组里，也可以在这里直接做单条数据的业务处理，进一步降低内存占用
  }

  return resultArray;
}

常见注意事项 #

• 必须加await接收结果：User.find({})返回的是Query查询对象，不是最终查询结果，不加await拿不到数据数组。
• 非必要不要去掉lean()：如果后续业务不需要调用Mongoose文档自带的save()、自定义实例方法等能力，一定要加lean()，能大幅降低内存占用、提升查询速度。
• 生产环境尽量避免全量拉取存入数组：如果是做批量处理、数据导出类需求，优先用流式处理逻辑，边拉取边处理，不要把全量数据都堆在内存里。
• 全量查询不要附带无索引的筛选条件：如果在find里加了没有命中索引的过滤规则，会触发MongoDB全表扫描，查询耗时会指数级上升。

内容的提问来源于stack exchange，提问作者Nayan Prasad P K