MongoDB 4.2版本持续负载下延迟飙升与子进程激增问题排查

我们运行MongoDB 4.2.9版本（4.2.1版本也存在相同问题），在持续负载测试时出现延迟突然飙升、实例进入异常状态的情况。场景为约5k读QPS、50写QPS（均为主键查询，访问模式无问题），读请求的活跃数据集小于1GB，Wired Tiger缓存大小超过30GB。通过PMM仪表板观察到，集群进入降级状态前，子进程数量出现大幅激增。已在MongoDB社区论坛提问但未获解答，配置中已设置processManagement.fork: true，且根据相关信息目前似乎无法限制子进程数量。

问题解答 #

a. MongoDB何时及如何创建子进程？ #

MongoDB创建子进程主要集中在以下场景：

• fork模式启动：当设置processManagement.fork: true时，主进程会创建一个子进程作为实际提供服务的数据库进程，原主进程退出或转为监控进程。
• 后台任务执行：部分异步后台操作会通过子进程完成，比如：
  • 备份、恢复相关的异步触发任务
  • WiredTiger存储引擎的checkpoint辅助进程、数据清理进程
  • 副本集节点同步、分片集群路由相关的辅助进程
  • 部分索引构建的异步处理逻辑
• 异常诊断与恢复：当主进程检测到内部异常时，可能创建子进程用于故障诊断或应急恢复操作。

b. 是否可以限制子进程的创建速率？ #

目前MongoDB官方没有提供直接的配置项来限制子进程的创建速率或数量。processManagement.fork仅控制启动阶段是否fork子进程，对于运行过程中因后台任务产生的子进程，没有内置的限流机制。遇到子进程激增的情况，需优先排查触发子进程创建的具体任务，而非直接限制数量。

c. 有没有关于MongoDB进程管理的官方文档？ #

MongoDB官方文档中关于进程管理的内容分散在以下模块：

• 启动配置模块：详细说明processManagement配置项（包括fork参数），讲解守护进程模式的运行逻辑
• 存储引擎模块：WiredTiger相关文档会涉及配套子进程的运行机制
• 运维监控模块：包含MongoDB进程状态、子进程相关指标的监控说明
• 集群运行模块：副本集、分片集群的文档中会提及同步、路由相关的辅助进程逻辑

d. 这种子进程激增是问题的原因还是其他问题的副作用？ #

子进程激增更可能是其他问题的副作用，而非直接原因：

• 当MongoDB遇到内部资源瓶颈（如内存碎片、锁争用、存储IO异常）时，会触发大量后台应急任务，进而导致子进程激增
• 即便活跃数据集小于WiredTiger缓存，高QPS下的元数据锁冲突、缓存页频繁置换，也可能引发后台进程频繁启动
• 4.2.x属于较老版本，可能存在未修复的进程管理相关bug，导致异常场景下子进程无限制创建，进一步加剧资源消耗，最终引发延迟飙升和实例降级

内容的提问来源于stack exchange，提问作者best wishes