容器cpu飙升需分层排查:先用docker stats确认是否持续>80%超5分钟,再结合宿主机top区分是容器、dockerd还是系统进程;进容器用top-h查线程,java用jstack定位nid,go用pprof,通用进程用strace;检查cpu.stat中nr_throttled>0判断节流;同步排查内存压力、上下文切换>10000/s、i/o等待及docker事件。

容器 CPU 使用率飙升,不能只看 top 里哪个进程占得高,得顺着资源控制链一层层查——从容器外到容器内、从系统级到应用线程级、从配置到行为。
先确认是不是真“飙”了
用 docker stats 看实时使用率,注意持续时间:单次峰值不等于问题,连续 3~5 分钟 >80% 才算异常。同时对比宿主机 top,确认是某个容器独占 CPU,还是 Docker daemon 或其他系统进程在吃资源。如果 dockerd 自身 CPU 高,可能是镜像拉取频繁、守护进程 bug 或日志驱动阻塞。
进容器查具体进程和线程
找到高负载容器后,执行:
-
docker exec -it
sh 进入容器 - 运行 top -c 或 htop(如已安装),按 %CPU 排序,记下 PID
- 对 Java 进程:用 top -H -p
查线程级占用,把高 CPU 的 TID 转成十六进制(printf "%x\n" ),再用 jstack | grep -A 20 "nid=0x..." 定位到具体方法栈 - 对 Go 进程:访问 /debug/pprof/profile 抓取 CPU profile,用 pprof 分析热点函数
- 对通用进程:用 strace -p
-e trace=clone,execve,futex 观察是否卡在系统调用或锁上
检查 cgroups 是否在节流
CPU 使用率显示 100%,但业务变慢,很可能是被内核限流了。查节流指标:
-
cat /sys/fs/cgroup/cpu/docker/
/cpu.stat | grep throttled —— 关注 nr_throttled 和 throttled_time - 若 nr_throttled > 0,说明容器已超出 --cpus 或 --cpu-quota 设置,被强制暂停调度
- 对比启动参数:docker inspect
| jq '.HostConfig.CpuCount, .HostConfig.CpuQuota, .HostConfig.CpuPeriod'
关联看其他压力信号
CPU 飙升常是结果,不是原因。同步排查:
-
内存压力:容器内存接近 limit?cat /sys/fs/cgroup/memory/docker/
/memory.usage_in_bytes 对比 memory.limit_in_bytes;若有 swap 或大量 page faults,GC 或缺页中断会拖累 CPU - 上下文切换:宿主机跑 pidstat -w 1,若每秒上下文切换 >10000,可能是线程/协程过多或锁竞争激烈
- I/O 等待:iostat -x 1 看 %util 和 await;iotop 看进程实际读写量;D 状态进程多,说明卡在磁盘或网络设备
- Docker 事件:docker events --filter type=container --since 1h 查是否有频繁 restart、OOM kill 或 health check 失败











