如何在MongoDB中找出数组中不存在于数据库的元素？

场景说明 #

现有MongoDB集合存储如下结构的文档：

[
    {"id":100},
    {"id":500},
    {"id":606},
    {"id":800}
]

给定id数组：

let x = [100,300,400,500,606,800];

需要筛选出数组中不存在于数据库的id（期望结果：[300, 400]），用于后续新增操作。

实现方案 #

步骤1：获取数据库中已存在的id列表

通过MongoDB查询提取所有已存在的id字段，整理为数组：

使用Mongoose的示例

// 假设模型为TargetModel，对应目标集合
const existingDocs = await TargetModel.find({}, 'id').lean();
const existingIdList = existingDocs.map(doc => doc.id);

使用原生MongoDB驱动的示例

const { MongoClient } = require('mongodb');

async function fetchExistingIds() {
  const client = new MongoClient('你的MongoDB连接URI');
  await client.connect();
  const collection = client.db('你的数据库名').collection('你的集合名');
  
  // 只查询id字段，排除_id
  const cursor = collection.find({}, { projection: { id: 1, _id: 0 } });
  const existingDocs = await cursor.toArray();
  await client.close();
  
  return existingDocs.map(doc => doc.id);
}

步骤2：筛选缺失的id

利用数组的filter方法，对比输入数组和已存在id列表，筛选出不在列表中的元素：

let x = [100,300,400,500,606,800];
const existingIdList = await fetchExistingIds(); // 或从Mongoose查询结果获取
const missingIds = x.filter(id => !existingIdList.includes(id));

console.log(missingIds); // 输出：[300, 400]

优化提示 #

如果输入数组规模较大，可考虑用MongoDB的$in查询来批量验证，减少内存占用：

// 查询输入数组中已存在的id
const existingInInput = await TargetModel.find(
  { id: { $in: x } },
  'id'
).lean();
const existingIdList = existingInInput.map(doc => doc.id);
// 筛选缺失的id逻辑同上

内容的提问来源于stack exchange，提问作者Jeet Shekhaliya