如何通过单查询获取指定IMEI列表中每个IMEI的最新TOP1记录？

必须可以啊！你当前这种暴力循环的方式，每一个IMEI都要发起一次独立查询，当imeiConfigs规模上去之后，光是网络往返和重复的查询开销就能把性能拖垮。借助MongoDB的聚合框架，我们可以用单条聚合查询批量搞定所有目标IMEI的最新记录，效率直接拉满。

核心思路 #

通过聚合管道的三个关键步骤实现：

1. 过滤目标数据：先筛选出所有属于指定IMEI集合的记录，减少后续处理的数据量。
2. 排序分组：按IMEI分组后，对每组内的记录按时间字段倒序排序，确保最新记录排在每组的首位。
3. 提取最新记录：按IMEI分组，直接取每组的第一条记录（也就是最新的那条）。

C# 代码实现 #

假设你的时序记录里用于排序的时间字段是Timestamp（记得替换成你实际用的字段名），代码如下：

// 先提取所有目标IMEI
var targetImeis = imeiConfigs.Select(c => c.IMEI).ToList();

// 构建聚合管道
var pipeline = new BsonDocument[]
{
    // 第一步：匹配目标IMEI的所有记录
    new BsonDocument("$match", new BsonDocument("IMEI", new BsonDocument("$in", targetImeis))),
    
    // 第二步：按IMEI升序、时间降序排序，确保每个IMEI的最新记录在组内最前面
    new BsonDocument("$sort", new BsonDocument("IMEI", 1).Add("Timestamp", -1)),
    
    // 第三步：按IMEI分组，取每组的第一条记录（最新）
    new BsonDocument("$group", new BsonDocument
    {
        { "_id", "$IMEI" },
        { "latestRecord", new BsonDocument("$first", "$$ROOT") } // $$ROOT表示整条文档
    }),
    
    // 可选：将最新记录作为根文档返回，结构和原查询一致
    new BsonDocument("$replaceRoot", new BsonDocument("newRoot", "$latestRecord"))
};

// 执行聚合查询，获取结果
var documents = _historyCollection.Aggregate<BsonDocument>(pipeline).ToList();

关键优化点 #

• 建立复合索引：一定要给IMEI和时间字段创建复合索引{ "IMEI": 1, "Timestamp": -1 }，这样$match和$sort阶段都能直接利用索引，避免全表扫描，性能提升会非常明显。
• 处理无记录的IMEI：如果某些IMEI在集合中没有对应的记录，聚合结果会自动忽略它们。如果你需要保留这些IMEI并返回null，可以后续和原列表做关联：

  // 将聚合结果转为字典，方便快速查找
  var imeiRecordMap = documents.ToDictionary(doc => doc["IMEI"].AsString);
  
  // 补全所有目标IMEI的记录（无记录则返回null）
  var finalDocuments = imeiConfigs.Select(config => 
      imeiRecordMap.TryGetValue(config.IMEI, out var record) ? record : null
  ).ToList();
  

性能对比 #

原来的循环方式：N次查询（N为IMEI数量），每次都要经历网络请求、查询、返回的流程。
聚合查询方式：1次查询完成所有处理，减少了大量网络往返开销，尤其是当IMEI数量超过几百个时，性能差距会非常显著。

内容的提问来源于stack exchange，提问作者James Gould