Linux怎么编写脚本自动收集系统KernelPanic崩溃转储日志

轻瑶吖_6022

轻瑶吖_6022

2026-11-08

278人浏览

原创

需先确认kdump已启用:systemctl is-active kdump返回active,/proc/cmdline含crashkernel参数,且lsinitrd kdump.img包含kdump模块;再按时间戳取/var/crash下最新非空目录,检查vmcore或vmcore.xz,待kdump写入完成(核验kernel_version等标记)后归档。

linux怎么编写脚本自动收集系统kernelpanic崩溃转储日志

如何确认系统已启用kdump并正常加载崩溃内核

没启用kdump,脚本再自动也没用——这是最常被跳过的前提。先检查kdump服务状态和crashkernel内核参数是否生效:

  • 运行 systemctl is-active kdump,返回 active 才算服务在跑;若为 inactive,需先执行 systemctl enable --now kdump
  • 检查启动参数:cat /proc/cmdline | grep crashkernel,必须看到类似 crashkernel=128M(值因内存而异,但不能缺失)
  • 验证崩溃内核是否加载:lsinitrd /boot/initramfs-$(uname -r)kdump.img | grep -q "kdump" && echo ok,无输出说明 initramfs 未包含 kdump 模块

常见坑:某些云主机或容器环境默认禁用 crashkernel,BIOS 中的 Secure Boot 也可能阻止 kdump initramfs 加载,此时需手动重装 dracut-kdump 并重建镜像。

崩溃转储路径与文件名规律必须硬编码进脚本

/var/crash/ 是默认路径,但实际子目录名带时间戳和内核版本,比如 /var/crash/127.0.0.1-2024-06-15-14:23:07/,里面才有 vmcore 和 vmcore-dmesg.txt。脚本不能只扫 /var/crash/*,得按时间排序取最新非空目录:

latest_dir=$(find /var/crash -maxdepth 1 -type d -name "[0-9]*" -printf '%T@ %p\n' 2>/dev/null | sort -n | tail -n1 | cut -d' ' -f2-)

注意点:

  • 目录名可能含冒号(:),find -name 通配符无法匹配,必须用 -printf + 时间戳判断
  • 有些发行版(如 RHEL 8+)默认把 vmcore 压缩成 vmcore.xz,脚本里得同时检查 vmcore 和 vmcore.xz
  • /var/crash 可能被 logrotate 清理,确认 /etc/logrotate.d/kdump 中未配置 rotate 0

自动归档脚本要绕过权限和锁文件问题

崩溃发生时,kdump 正在写入 vmcore,脚本若直接打包会遇到“文本忙”或权限拒绝。正确做法是等 kdump 完全退出、并检查锁标记:

Linuxdo Application
Linuxdo Application

为 Linux.do 注册撰写高通过率、去 AI 化的中文小作文。进行自适应调查以了解申请人的真实背景,...

下载
  • kdump 成功后会在目录下生成 kernel_version 和 timestamp 文件,可作为完成信号
  • 用 fuser -v /var/crash 检查是否有进程占用该目录,避免误操作
  • 归档前加锁:mkdir /var/crash/.archive_lock 2>/dev/null || exit 1,归档完再 rmdir,防止并发触发多次
  • 建议用 rsync -a --remove-source-files 移动而非 cp,既保留权限又释放磁盘空间

别用 inotifywait 监听目录创建——kdump 启动时就建好空目录,你监听到的不是“完成”,而是“开始”。

怎么让脚本在每次重启后自动检查并上报上次崩溃

Kernel Panic 发生后系统会硬重启,脚本没法“实时响应”,只能在下次启动时补救。推荐在 /etc/rc.d/rc.local 或 systemd service 的 ExecStartPre 阶段运行检测逻辑:

  • 判断是否为 Panic 后首次启动:last reboot | head -n1 | grep -q "system boot.*ago" 不够准,改用 dmesg -T | head -20 | grep -q "Kernel panic" 更可靠
  • 上报方式选轻量级:用 curl -X POST -F "file=@$vmcore_path" https://your-log-server/upload,避免引入 Python 或复杂依赖
  • 务必加 timeout 300 和重试逻辑,防止网络卡住阻塞开机流程

最容易被忽略的是 SELinux 上下文:RHEL/CentOS 默认禁止 rc.local 访问 /var/crash,得先运行 semanage fcontext -a -t public_content_t "/var/crash(/.*)?" 再 restorecon -Rv /var/crash。

相关专题

更多
磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

2023.06.21

4450

4

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

2023.06.29

3733

10

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2023.06.30

3033

5

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

2023.07.05

7510

7

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

2023.07.06

7142

7

linux查看文件夹大小
linux查看文件夹大小

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。linux怎么查看文件夹大小呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.20

4053

8

linux查看ip命令
linux查看ip命令

本专题为大家提供linux查看ip命令相关文章内容,感兴趣的朋友可以免费下载体验试试。

2023.07.20

3545

4

linux查看cpu使用率
linux查看cpu使用率

在linux的系统维护中,可能需要经常查看cpu使用率,分析系统整体的运行情况。本专题为大家带来了linux查看cpu使用率的相关文章,感兴趣的朋友千万不要错过了。

2023.07.25

3799

6

linux查找文件命令
linux查找文件命令

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.31

297

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
尚观shell视频教程
尚观shell视频教程

共8课时 | 1.9万人学习

Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习

Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习