MongoDB如何查询两集合中_id相同但x字段值不同的记录

适用场景 #

• 两个集合记录总数一致
• 关联等价记录的_id字段值完全相同
• 需要筛选出_id匹配，但指定对比字段（示例为flavour，可替换为通用字段x）取值不一致的所有记录

查询实现 #

通过MongoDB聚合管道的$lookup做等值关联，再筛选字段不匹配的记录即可，示例代码如下：

// 注意替换代码里的集合名、对比字段名为实际业务值
db.firstCollection.aggregate([
  {
    $lookup: {
      from: "secondCollection", // 替换为第二个集合的实际名称
      localField: "_id",
      foreignField: "_id",
      as: "relatedRecord"
    }
  },
  {
    // _id全局唯一，关联结果仅会返回0或1条匹配记录，拆分后方便字段对比
    $unwind: "$relatedRecord"
  },
  {
    $match: {
      $expr: {
        // 单字段对比示例：对比flavour字段，替换为x即可对比x字段
        $ne: ["$flavour", "$relatedRecord.flavour"]

        // 多字段同时对比可以用$or包裹多个不等条件，示例：
        // $or: [
        //   { $ne: ["$flavour", "$relatedRecord.flavour"] },
        //   { $ne: ["$price", "$relatedRecord.price"] }
        // ]
      }
    }
  },
  {
    // 可选：自定义返回字段，直观展示两边集合的取值差异
    $project: {
      _id: 1,
      valueInFirstCollection: "$flavour",
      valueInSecondCollection: "$relatedRecord.flavour"
    }
  }
])

返回示例 #

针对_id = apples且两边flavour取值不同的场景，查询返回结果格式如下：

[
  {
    "_id": "apples",
    "valueInFirstCollection": "sour",
    "valueInSecondCollection": "sweet"
  }
]

注意事项 #

• MongoDB默认会为所有集合的_id字段创建唯一索引，即使是百万级以上数据量，该查询也能保持较好的执行效率
• 如果需要从第二个集合反向排查差异，只要把聚合操作的主集合、$lookup里的from参数对应互换即可
• 若字段可能存在不存在的情况（某条记录缺失对比字段），可以在$match前追加字段存在性判断，避免把缺字段的记录误判为值不同

内容的提问来源于stack exchange，提问作者Dhar_