.NET Core中MongoDB复合索引查询性能过慢问题排查

问题详情 #

我有一个带复合索引的MongoDB查询，查询语句如下：

{
  daySeq: 7942,
  ipType: 1,
  sessionStartTime: {
    $lt: ISODate('2023-07-31T23:00:00.000Z')
  },
  sessionUpdateTime: {
    $gt: ISODate('2023-07-31T22:00:00.000Z')
  }
}

使用的索引为 daySeq_-1_ipType_-1_sessionStartTime_-1_sessionUpdateTime_-1，在MongoDB Compass中执行该查询的explain结果显示，执行耗时24836毫秒，返回392589条数据。

但在.NET Core中通过以下代码执行时，耗时长达3-4分钟才能返回结果：

var filter = Builders<CdrDocumentModel>.Filter.And(
  Builders<CdrDocumentModel>.Filter.Eq("daySeq", daySeq),
  Builders<CdrDocumentModel>.Filter.Eq("ipType", 1),
  Builders<CdrDocumentModel>.Filter.Lt("sessionStartTime", BsonDateTime.Create(endDate.AddHours(3))),
  Builders<CdrDocumentModel>.Filter.Gt("sessionUpdateTime", BsonDateTime.Create(startDate.AddHours(3)))
);
var cdrList = await _cdrRepository.GetCollection().Find(filter)
  .Project(cdr => new CdrDocumentModel() {
    Username = cdr.Username,
      SessionId = cdr.SessionId,
      User = cdr.User,
  })
  .ToListAsync();

可能的原因及排查方向 #

1. 索引命中情况不一致 #

虽然定义了复合索引，但.NET驱动生成的查询可能和Compass中的存在细微差异（比如日期类型的序列化方式），导致没有正确命中目标索引，或者扫描了更多文档。

• 排查方法：在.NET代码中调用ExplainAsync获取执行计划，对比Compass的explain结果，重点查看executionStats中的totalDocsExamined、executionStages.inputStage.indexName等字段，确认是否使用了指定的复合索引，扫描的文档数是否一致。
• 同时输出.NET生成的filter对应的BsonDocument，和Compass的查询语句逐字段对比，确保查询条件完全一致。

2. 数据序列化/反序列化与内存开销 #

Compass仅展示查询结果（通常会做分页或只加载部分数据），而.NET代码中ToListAsync会一次性将39万条数据全部反序列化为CdrDocumentModel对象，这会带来巨大的内存和CPU开销：

• 即使使用了Project，如果CdrDocumentModel包含大量未被投影的复杂属性，驱动仍可能在反序列化时处理冗余数据；
• 39万条对象同时加载到内存会触发频繁的GC，进一步拉长耗时。
• 优化建议：定义一个仅包含Username、SessionId、User的轻量DTO类，在Project中映射到该DTO，减少反序列化开销；避免一次性加载所有数据，改用分页（Skip+Take）或流式处理（ForEachAsync）分批处理数据。

3. 网络传输差异 #

Compass通常与MongoDB服务器处于同一网络环境，延迟极低；而.NET应用所在服务器如果与MongoDB网络链路延迟较高，39万条数据的传输时间会被显著放大：

• 排查方法：在.NET应用服务器上使用mongosh执行相同查询，对比耗时。如果mongosh耗时接近Compass，说明问题出在.NET代码的处理环节；如果mongosh也耗时很久，则需要优化网络链路。

4. 查询参数的日期范围差异 #

检查.NET代码中endDate.AddHours(3)和startDate.AddHours(3)生成的日期是否与Compass中的ISODate完全一致：

• 可能存在时区计算错误，导致查询的日期范围比Compass中的更大，返回的数据量远超预期，从而拉长耗时。
• 排查方法：在代码中输出生成的BsonDateTime值，与Compass中的日期直接对比。

内容的提问来源于stack exchange，提问作者fifauser