如何在Mongoose中查询时去除指定字段重复的结果？

嘿，这个场景太常见了！我之前处理Spotify数据的时候也遇到过一模一样的问题——重复专辑堆在库里，得按自定义的id（不是MongoDB自带的_id）去重对吧？给你两个实用的Mongoose解决方案，按需选就行：

这种方法一步到位，直接拿到每个唯一专辑对应的完整文档，你可以选择保留分组里的第一条或最后一条数据：

const uniqueAlbums = await Album.aggregate([
  // 按自定义的专辑id分组，保留组内第一个完整文档
  {
    $group: {
      _id: "$id", // 核心：以你的自定义id作为分组依据
      album: { $first: "$$ROOT" } // $$ROOT代表整个文档，$first取组内最早存入的，换$last则取最新的
    }
  },
  // 把嵌套的album字段提为根文档，让返回结构和普通查询一致
  {
    $replaceRoot: { newRoot: "$album" }
  }
]);

如果你的业务更关心最新存入的重复专辑，把$first换成$last就好，非常灵活。

如果需要先拿到所有不重复的专辑id，再做后续处理（比如分批查询、过滤），用distinct会更简洁：

// 第一步：获取所有不重复的专辑id数组
const uniqueAlbumIds = await Album.distinct("id");

// 第二步：根据唯一id列表查询完整文档
const uniqueAlbums = await Album.find({ id: { $in: uniqueAlbumIds } });

不过要注意：如果你的数据集特别大，$in的数组长度可能会影响性能，这时候方案一的聚合查询会更高效。

既然是从Spotify API拉取数据，最好在Schema里给id字段加唯一索引，这样插入重复专辑时会直接抛出错误，从源头避免重复：

const albumSchema = new mongoose.Schema({
  id: { type: String, unique: true }, // 加上唯一约束
  name: String,
  artist: String,
  // 其他专辑字段...
});

如果担心插入时因为重复报错，可以用findOneAndUpdate配合upsert: true，不存在就插入，存在就更新：

await Album.findOneAndUpdate(
  { id: spotifyAlbum.id },
  spotifyAlbum,
  { upsert: true, new: true }
);

内容的提问来源于stack exchange，提问作者Shan Robertson