在Google Container-Optimized OS(COS)中排查进程高CPU占用的方法

由于COS系统限制无法额外安装工具，可使用以下自带工具定位异常进程：

• top
  实时查看进程资源占用，默认界面按CPU占比排序。按P键强制按CPU使用率降序排列，按I键切换显示磁盘IO相关统计列（如DISK READ/WRITE），快速定位CPU和IO占用最高的进程。使用top -b -n 1可输出静态快照，方便保存分析。

• ps
  输出进程快照，通过参数定制排序和显示列：

  • ps aux --sort=-%cpu：按CPU使用率降序列出所有进程
  • ps -eo pid,ppid,pcpu,pmem,cmd：指定显示进程ID、父进程ID、CPU占比、内存占比及命令
  • ps -efH：以树形结构显示进程关系，排查是否由子进程批量异常导致资源占用

• pidstat
  按进程维度统计资源使用，适合长期观测：

  • pidstat -u 1：每秒输出一次进程CPU使用统计
  • pidstat -d 1：每秒输出一次进程磁盘IO统计，可直接看到每个进程的读/写IOPS和吞吐量

• strace
  跟踪可疑进程的系统调用，定位资源消耗的根源：

  • strace -p <PID>：实时跟踪目标进程的系统调用，查看是否存在频繁的磁盘读（如read）或其他高开销调用
  • strace -c -p <PID>：统计目标进程各类系统调用的次数、耗时占比，快速定位占比最高的调用类型

• lsof
  查看进程打开的文件、套接字等资源：

  • lsof -p <PID>：列出目标进程关联的所有文件，结合磁盘IO高的现象，判断是否存在频繁读取大文件或异常文件的情况

• dmesg
  查看内核日志，排查系统级异常：

  • dmesg | grep -i error：过滤错误信息，检查是否存在磁盘IO错误、进程崩溃、OOM Killer触发等日志，辅助定位问题根源

• Docker工具链
  针对COS的容器场景，优先排查容器进程：

  • docker stats：实时显示所有容器的CPU、内存、磁盘IO、网络资源占用，快速定位异常容器
  • docker top <容器ID>：查看目标容器内运行的进程，进一步定位容器内的异常进程
  • docker logs <容器ID>：查看容器日志，检查是否有业务异常输出导致资源占用飙升

内容的提问来源于stack exchange，提问作者zino