Linux 中怎么排查 CPU 上下文切换过高导致的性能下降

云浩同学_8445

云浩同学_8445

2026-10-23

442人浏览

原创

linux排查cpu上下文切换过高需先用vmstat看cs列是否异常(>5000/s需警惕),再用pidstat -w区分自愿(cswch/s)与非自愿切换(nvcswch/s),最后用perf抓sched_switch事件分析根因。

linux 中怎么排查 cpu 上下文切换过高导致的性能下降

Linux 中排查 CPU 上下文切换过高导致的性能下降,关键不是盯着“CPU 使用率低就没事”,而是主动识别“CPU 在忙切换,没在干活”这种隐性卡顿。核心思路是:先确认是否异常高,再分层定位到进程、线程、切换类型,最后结合行为归因。

看整体是否异常:用 vmstat 快速抓基准

运行 vmstat 1,重点关注 cs(context switch)列:

  • 空闲系统通常每秒几十到一两百次;持续超过 5000 次/秒需警惕,上万甚至十万级基本可判定为异常
  • 同步看 r(就绪队列长度)和 in(中断次数):若 r 很小但 cs 很高,说明不是 CPU 竞争导致,更可能是 I/O 或锁等待引发的自愿切换;若 in 也同步飙升,要怀疑中断风暴
  • 注意 cs 包含所有切换——进程、线程、内核态/用户态模式切换,它只是“总报警灯”,不能直接定位根因

查具体是谁在切:用 pidstat -w 分进程分析

执行 pidstat -w 1,重点观察两列:

Obsidian (Linux)
Obsidian (Linux)

操作 Obsidian 库(纯 Markdown 笔记),并通过 notesmd-cli 实现自动化。

下载
  • cswch/s:每秒自愿上下文切换次数。高值常见于进程主动 sleep、wait、阻塞式 I/O(如未设 O_NONBLOCK 的 read)、锁竞争等待
  • nvcswch/s:每秒非自愿切换次数。高值指向 CPU 时间片被抢、调度器强占,典型场景是大量线程争抢少数 CPU 核心,或存在高优先级实时任务干扰
  • 重点关注 cswch/s 高但 %CPU 却很低的进程——这是“假空闲真卡顿”的典型信号,比如一个 Java 应用线程频繁调用 Object.wait() 或阻塞读 socket

挖深层原因:结合 perf 和 /proc/PID/status 细查

仅靠统计不够,得知道“为什么切”和“切得有多痛苦”:

  • 用 perf record -e sched:sched_switch -a sleep 10 抓调度事件,再用 perf script | grep -E '==>.*| 查看哪些进程/线程在频繁进出 CPU,以及被切出的原因(如 preempt、signal、io、timeout)
  • 查可疑进程的 /proc/PID/status,看 voluntary_ctxt_switches 和 nonvoluntary_ctxt_switches 累计值。两者比值远大于 10:1,大概率是 I/O 或锁问题;接近 1:1 则偏向 CPU 资源争抢
  • 对 Java 进程,配合 top -H -p PID 找高 cswch 的线程,用 printf '%x' TID 转 nid,再 jstack PID | grep nid -A5 -B5 看堆栈,确认是否卡在 WAITING 或 BLOCKED 状态

常见诱因与对应线索

很多高频切换不是“多任务”本身造成的,而是某些编程或配置习惯触发的隐式调度:

  • 阻塞 I/O:日志里看到大量 read/write 系统调用耗时长,或 strace -p PID -e trace=read,write 发现频繁进入内核并返回 EAGAIN 后又重试
  • 高频 clock_gettime:尤其 CLOCK_MONOTONIC 在旧内核未 vDSO 化时,每次调用都陷内核,perf record -e syscalls:sys_enter_clock_gettime 可验证
  • 信号轮询:如用 kill -USR1 频繁通知 worker 线程,cat /proc/PID/status | grep Sig 可见挂起信号数激增
  • 无界自旋:代码中出现 while(!flag); 且无 cpu_relax(),perf top -p PID 会显示该函数长期占用 CPU,但实际没做有效计算

相关文章

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

相关标签:

linux linux系统

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

2023.06.21

4170

4

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

2023.06.29

3533

10

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2023.06.30

2753

5

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

2023.07.05

6730

7

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

2023.07.06

6382

7

linux查看文件夹大小
linux查看文件夹大小

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。linux怎么查看文件夹大小呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.20

3673

8

linux查看ip命令
linux查看ip命令

本专题为大家提供linux查看ip命令相关文章内容,感兴趣的朋友可以免费下载体验试试。

2023.07.20

3185

4

linux查看cpu使用率
linux查看cpu使用率

在linux的系统维护中,可能需要经常查看cpu使用率,分析系统整体的运行情况。本专题为大家带来了linux查看cpu使用率的相关文章,感兴趣的朋友千万不要错过了。

2023.07.25

3399

6

linux查找文件命令
linux查找文件命令

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.31

297

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习

Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习