Cassandra DB磁盘读写速率与CPU使用率间歇性突增问题排查求助

Cassandra 4.0.3采用Docker部署，搭配Docker安装的Node Exporter和Process Exporter监控，出现磁盘读写速率与CPU使用率间歇性突增的现象：

• 突增时段Process Exporter显示资源消耗最高的进程组为Java，锁定为Cassandra的Java层面问题
• 已排除特殊流量、压缩周期触发、集群异常等因素

• 检查GC日志：查看Cassandra容器内的gc.log，确认突增时段是否发生Full GC或长时间的Young GC，重点关注GC耗时、内存回收量及触发频率，这类GC事件会直接导致CPU和IO突增
• 校验JVM参数配置：核对堆内存（Xmx/Xms）、新生代与老年代内存比例、GC收集器配置（Cassandra 4.0默认G1GC），不合理的内存分配会引发频繁GC，进而触发资源突增
• 分析系统日志：查看容器内system.log中突增时段的记录，排查是否有后台任务（如二级索引更新、数据一致性校验、快照自动清理）启动，这类后台操作可能占用大量资源
• 检查Docker资源限制：确认Cassandra容器的CPU、内存配额是否充足，若配额过低，JVM在执行内存操作时会引发宿主机资源争抢，导致间歇性突增
• 验证磁盘IO性能：在突增时段通过iostat -x 1（宿主机或容器内）查看磁盘IO指标（如%util、await），排查是否存在磁盘性能瓶颈或IO队列阻塞

内容的提问来源于stack exchange，提问作者battlecook