Shell脚本实战怎么监控CPU与内存利用率超限时自动抓取进程快照用于排查

冷漠man

冷漠man

2026-07-29

954人浏览

原创

核心是“定时检测 + 阈值判断 + 快照采集”,用mpstat和free精准获取cpu与内存使用率,设85~90% cpu、75~85%内存阈值并连续2次超限才触发,快照含top进程、线程、io详情,保存至时间戳目录,配合文件锁与日志实现健壮守护。

shell脚本实战怎么监控cpu与内存利用率超限时自动抓取进程快照用于排查

监控CPU和内存利用率并在超限时自动抓取进程快照,核心是“定时检测 + 阈值判断 + 快照采集”。不需要复杂框架,用toppspidstatdate就能完成,关键是触发时机准、快照信息全、日志可追溯。

实时获取准确的CPU与内存使用率

Linux下top -bn1vmstat 1 1输出易受干扰,推荐用更稳定的组合:

  • CPU总使用率:用mpstat 1 1 | awk '$3 ~ /%idle/ {printf "%.1f", 100-$11}'(需sysstat包),比top解析更可靠
  • 内存使用率:用free -m | awk 'NR==2{printf "%.1f", $3/$2*100}',避开cached/buffer干扰,聚焦实际已用比例
  • 注意:避免在脚本中频繁调用top -b -n1并grep,它默认含延迟且字段位置可能随版本变化

设定合理阈值并避免误触发

阈值不是越低越好。例如CPU持续>90%才需干预,但瞬时毛刺(如磁盘IO抖动)应过滤:

Shell脚本编写基础 中文WORD版
Shell脚本编写基础 中文WORD版

Shell本身是一个用C语言编写的程序,它是用户使用Linux的桥梁。Shell既是一种命令语言,又是一种程序设计语言。作为命令语言,它交互式地解释和执行用户输入的命令;作为程序设计语言,它定义了各种变量和参数,并提供了许多在高级语言中才具有的控制结构,包括循环和分支。它虽然不是Linux系统核心的一部分,但它调用了系统核心的大部分功能来执行程序、建立文件并以并行的方式协调各个程序的运行。因此,对于用户来说,shell是最重要的实用程序,深入了解和熟练掌握shell的特性极其使用方法,是用好Linux系统

下载
  • 连续2次检测超限才触发(加计数器或写临时标记文件)
  • CPU阈值建议设为85~90%,内存建议75~85%,留出缓冲余量
  • 加时间窗口限制:同一小时内最多触发3次快照,防风暴式日志刷屏

抓取高价值进程快照,不止是ps aux

单靠ps aux不够——看不出线程、IO、内存分布。一次快照应包含:

  • 按CPU排序的前10进程:ps -eo pid,ppid,%cpu,%mem,cmd --sort=-%cpu | head -n11
  • 按内存排序的前10进程:ps -eo pid,ppid,%cpu,%mem,cmd --sort=-%mem | head -n11
  • 各进程线程详情:ps -T -p $(pgrep -f "java|nginx" | head -1) 2>/dev/null | head -20(示例,可动态取高耗进程PID)
  • IO热点进程:iotop -b -n1 -o -P 2>/dev/null | head -15(需root权限)
  • 保存为带时间戳的独立目录,如/var/log/process-snap/20240520-142305/

集成到守护循环,支持后台长期运行

while true; do ...; sleep 30; done即可,但要增强健壮性:

  • 开头加set -etrap 'rm -f /tmp/cpu_alert.lock' EXIT防残留锁
  • 用文件锁避免并发执行:if mkdir /tmp/cpu_alert.lock 2>/dev/null; then ...; rmdir /tmp/cpu_alert.lock; fi
  • 日志统一输出到/var/log/resource-alert.log,记录触发时间、指标值、快照路径
  • 可选:超限后发邮件或调用curl通知企业微信/钉钉(加curl -X POST语句)

不复杂但容易忽略细节。重点不在命令多炫,而在每次触发都能拿到足够定位问题的上下文信息。

相关专题

更多
磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

2023.06.21

2672

4

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

2023.06.29

1649

10

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2023.06.30

1297

5

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

2023.07.05

2674

7

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

2023.07.06

2421

7

linux查看文件夹大小
linux查看文件夹大小

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。linux怎么查看文件夹大小呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.20

1660

8

linux查看ip命令
linux查看ip命令

本专题为大家提供linux查看ip命令相关文章内容,感兴趣的朋友可以免费下载体验试试。

2023.07.20

1254

4

linux查看cpu使用率
linux查看cpu使用率

在linux的系统维护中,可能需要经常查看cpu使用率,分析系统整体的运行情况。本专题为大家带来了linux查看cpu使用率的相关文章,感兴趣的朋友千万不要错过了。

2023.07.25

1423

6

linux查找文件命令
linux查找文件命令

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.31

210

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
尚观shell视频教程
尚观shell视频教程

共8课时 | 1.8万人学习

Linux开发视频教程
Linux开发视频教程

共18课时 | 4.5万人学习

Perl 入门教程
Perl 入门教程

共29课时 | 30.3万人学习