MongoDB集合A移除transactions数组重复元素及创建索引求助

1. 移除transactions数组内的重复元素 #

针对A集合中13万+文档的transactions数组去重，推荐使用MongoDB 4.2+支持的聚合管道式批量更新，利用$setUnion操作符自动去重数组元素：

db.A.updateMany(
  {}, // 匹配所有文档
  [
    { $set: { transactions: { $setUnion: ["$transactions", []] } } }
  ]
)

说明 #

• $setUnion会将输入数组转换为无重复元素的集合，再转回数组，完美实现去重；
• 若需要先验证去重效果，可先针对单文档测试：

  db.A.aggregate([
    { $match: { _id: ObjectId("目标文档ID") } },
    { $project: { transactions: { $setUnion: ["$transactions", []] } } }
  ])
  

• 由于数据量较大，建议在业务低峰期执行更新操作，避免影响正常业务。

2. 创建复合索引 #

完成数组去重后，执行以下语句创建包含aC、aI、aN、aT、bID、pD字段的复合索引：

db.A.createIndex(
  { aC: 1, aI: 1, aN: 1, aT: 1, bID: 1, pD: 1 }, // 1表示升序，可根据查询需求调整为-1（降序）
  { background: true } // 后台创建索引，不阻塞其他数据库操作
)

说明 #

• background: true参数非常关键，针对大集合创建索引时，后台模式不会锁定集合，避免业务中断；
• 字段顺序需结合实际查询场景调整：查询过滤条件中常用的字段建议放在索引前列。

内容的提问来源于stack exchange，提问作者Shilpa1904