进程管理中怎么在进程卡死且无法响应任何系统信号时通过dmesg排查其是否已经陷入不可中断的D状态(D State)

轻伟君_5196

轻伟君_5196

2026-08-24

800人浏览

原创

dmesg本身不能直接确认进程d状态,但可通过hung task报告(如“blocked for more than 120 seconds”)和i/o错误日志(如“i/o error”“controller is down”)定位d进程的阻塞原因与持续时间,需结合ps或/proc/pid/status验证。

进程管理中怎么在进程卡死且无法响应任何系统信号时通过dmesg排查其是否已经陷入不可中断的d状态(d state)

直接看 dmesg 本身不能确认某个具体进程是否处于 D 状态,但它能提供关键佐证:当进程因底层 I/O 或驱动异常长期卡在不可中断等待时,内核会主动记录超时事件和阻塞线索。真正判断 D 状态要靠 ps/proc/PID/status,而 dmesg 的作用是帮你锁定“为什么卡”以及“卡得有多久”。

心流
心流

心流是一款AI工具,阿里旗下推出的AI搜索助手。

下载

dmesg 中识别 D 状态进程的典型线索

  • hung task 报告是最直接信号
    执行 dmesg -T | grep -i "blocked for more than",若看到类似:
    INFO: task rsync:12345 blocked for more than 120 seconds.
    这说明内核已检测到 PID 12345 的进程持续处于 D 状态超 2 分钟,并主动告警。该行后通常紧跟着其内核调用栈(如 nfs_wait_bit_killable__nvme_submit_cmd),可直接定位阻塞点。

  • I/O 错误日志与 D 状态高度相关
    进程陷入 D 状态往往伴随设备无响应,dmesg 里会出现:

    • end_request: I/O error, dev sdb, sector 123456
    • nvme 0000:01:00.0: controller is down
    • ata2.00: failed command: READ FPDMA QUEUED
    • rejecting I/O to offline device
      这些不是进程状态本身,但只要它们出现在 hung task 日志之前或同期,基本可断定 D 进程正在等这个失败的设备。
  • HBA/光纤链路中断日志指向批量 D 进程
    若是存储光纤挂断,dmesg 常见输出:
    qla2xxx 0000:04:00.0: Link down
    lpfc 0000:05:00.0: Loss of Signal
    fcp: fcp_cmd timeout
    此时多个进程(尤其是访问对应 LUN 的)会集体变 D,dmesg 时间戳能帮你确认故障起始时间,再反查 ps 当时的 D 进程列表。

如何联动 dmesg 和进程状态交叉验证

  • 先用 dmesg -T | tail -50 找出最近一条 hung task 或 I/O error 的时间(比如 [Mon Jul 20 19:42:33 2026]
  • 再执行 ps -eo pid,comm,state,etimes,wchan --sort=-etimes | awk '$3 ~ /^D$/',筛选出 etimes(调度延迟秒数)大的 D 进程
  • 对比两者时间是否接近:若某 D 进程的 etimes 值 ≈ dmesg 中 hung task 的阻塞时长(如 138 秒),且 wchan 显示 nfs_wait_eventblk_mq_do_dispatch_sched,基本闭环。

注意 dmesg 的局限性

  • 它不显示进程名、PID 或当前状态码,仅反映内核视角的“异常事件”
  • 没有 hung task 或 I/O error 日志,不代表没有 D 进程——可能阻塞时间尚短(
  • dmesg 干净但 ps 查到大量 D 进程,应立刻查 /proc/PID/ioread_bytes/write_bytes 是否增长,再结合 iotop -o 看实时 IO 流量

不复杂但容易忽略:dmesg 是诊断 D 状态的“听诊器”,不是“体温计”。它告诉你“身体某处出了问题”,而 ps/proc 才告诉你“谁病了、病得多重”。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

2023.06.21

3590

4

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

2023.06.29

3133

10

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2023.06.30

2193

5

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

2023.07.05

5190

7

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

2023.07.06

4862

7

linux查看文件夹大小
linux查看文件夹大小

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。linux怎么查看文件夹大小呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.20

2933

8

linux查看ip命令
linux查看ip命令

本专题为大家提供linux查看ip命令相关文章内容,感兴趣的朋友可以免费下载体验试试。

2023.07.20

2425

4

linux查看cpu使用率
linux查看cpu使用率

在linux的系统维护中,可能需要经常查看cpu使用率,分析系统整体的运行情况。本专题为大家带来了linux查看cpu使用率的相关文章,感兴趣的朋友千万不要错过了。

2023.07.25

2639

6

linux查找文件命令
linux查找文件命令

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.31

277

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
swoole进程树解析
swoole进程树解析

共4课时 | 0.3万人学习

ubuntu官方总文档
ubuntu官方总文档

共0课时 | 0人学习