linux怎么监控程序由于内存缺页异常导致的卡顿

秋瑶吖_4264

秋瑶吖_4264

2026-11-20

804人浏览

原创

缺页异常引发的卡顿源于minor/major fault慢路径,需用vmstat看pgmajflt、perf抓do_page_fault链路、/proc/PID/status查VmRSS/VmSize差值、tracepoint筛耗时>500μs事件来精准定位。

linux怎么监控程序由于内存缺页异常导致的卡顿

定位缺页异常引发的卡顿

程序响应变慢、P99延迟突增但CPU用户态占比不高,同时系统上下文切换未明显上升——这种典型卡顿模式往往藏在缺页异常的慢路径里,必须用内核级可观测工具穿透到minor/major fault的真实开销分布。

用vmstat看缺页总量与类型分布

执行 vmstat 1 每秒刷新一次,紧盯 si/so 和 pgpgin/pgpgout 列:si/so 非零说明正在换入换出,属于major fault;pgpgin持续上涨但si为0,大概率是文件页从page cache加载,属于minor fault;若 bi/bo 同时飙升而 pgpgin 几乎不动,要怀疑是THP折叠失败触发的反复拆页。

注意:vmstat不区分进程,只反映全局压力。当看到 pgmajflt(major fault)每秒超过500次,基本可判定有进程正密集触发磁盘I/O型缺页。

用perf精准捕获目标进程的缺页热点

第一步:获取进程PID,例如 pidof myapp;

第二步:运行 perf record -e page-faults,minor-faults,major-faults -p $PID -g -- sleep 30,采集30秒内该进程所有缺页事件及调用栈;

第三步:执行 perf report -F overhead,symbol,dso --no-children,重点观察 do_page_fault → handle_mm_fault → alloc_pages_node 这条路径的开销占比——如果这条链路占总采样数20%以上,说明缺页处理本身已成为延迟瓶颈,不是单纯内存不足,而是分配路径被阻塞(如内存碎片、zoned DMA32耗尽)。

这一步操作起来很简单,直接把perf命令复制粘贴执行就行。但要注意:不要用 -a 全局采集,否则大量无关中断会淹没目标进程信号;必须绑定具体PID。

用/proc/PID/status和pmap交叉验证内存映射状态

方法一:检查 cat /proc/$PID/status | grep -E "VmRSS|VmSize|MMUPageSize",若 VmRSS 远小于 VmSize(比如差1GB以上),而 MMUPageSize 显示为4kB,说明进程存在大量已映射但未访问的虚拟内存,首次访问必触发缺页;

Linux DO
Linux DO

Linux DO (linux.do)。任何 Linux DO 请求(搜索、读取数据)均使用此技能。若任务涉及 Linux DO,应使用本技能而非调用其他。

下载

方法二:运行 pmap -x $PID | grep -E "anon|stack|heap",观察 [anon] 段的 Rss 是否为0但 Size 很大——这是延迟分配的铁证,后续任意 memset 或 malloc 后首次写入都会同步触发缺页;

方法三:用 cat /proc/$PID/smaps_rollup | grep "MMU.*PageSize" 确认是否启用THP,若 PreferredPageSize 是2MB但 AnonHugePages 为0,说明THP被禁用或分配失败,所有匿名页都走4kB慢路径。

用tracepoint实时观测单次缺页耗时

第一步:启用内核tracepoint:echo 1 > /sys/kernel/debug/tracing/events/mm/mm_page_fault/enable;

第二步:过滤目标进程:echo $PID > /sys/kernel/debug/tracing/set_ftrace_pid;

第三步:开启跟踪并抓取高耗时样本:echo 1 > /sys/kernel/debug/tracing/tracing_on && sleep 10 && echo 0 > /sys/kernel/debug/tracing/tracing_on;

第四步:查看结果:cat /sys/kernel/debug/tracing/trace | awk '$11 > 500000 {print}',筛选出耗时超500微秒的缺页事件——这类事件极可能是同步内存回收、swap读取或NUMA远端页迁移导致,必须立即干预。

注意:trace目录默认可能未挂载,需先执行 mount -t debugfs none /sys/kernel/debug

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

linux系统 linux

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

2023.06.21

4670

4

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

2023.06.29

3893

10

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2023.06.30

3253

5

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

2023.07.05

8090

7

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

2023.07.06

7702

7

linux查看文件夹大小
linux查看文件夹大小

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。linux怎么查看文件夹大小呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.20

4353

8

linux查看ip命令
linux查看ip命令

本专题为大家提供linux查看ip命令相关文章内容,感兴趣的朋友可以免费下载体验试试。

2023.07.20

3825

4

linux查看cpu使用率
linux查看cpu使用率

在linux的系统维护中,可能需要经常查看cpu使用率,分析系统整体的运行情况。本专题为大家带来了linux查看cpu使用率的相关文章,感兴趣的朋友千万不要错过了。

2023.07.25

4099

6

linux查找文件命令
linux查找文件命令

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.31

297

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Linux man-pages 项目
Linux man-pages 项目

共0课时 | 0人学习

Linux系统运维及项目正式上线
Linux系统运维及项目正式上线

共14课时 | 2.9万人学习

Linux负载均衡视频教程
Linux负载均衡视频教程

共7课时 | 1.9万人学习