Linux怎么排查硬件阵列卡掉电导致的数据丢失

大磊大大_7150

大磊大大_7150

2026-10-13

781人浏览

原创

看到 dmesg 里反复刷 end_request: i/o error 就该停手,这表明阵列卡已丢失对磁盘的控制权,此时任何读写操作(如 ls、df、fsck)都在向逻辑断联设备发请求,可能加剧控制器状态错乱。

linux怎么排查硬件阵列卡掉电导致的数据丢失

看到 dmesg 里反复刷 end_request: I/O error 就该停手了

硬件阵列卡掉电后最典型的表征不是“硬盘不识别”,而是内核日志里持续出现 end_request: I/O error, dev sdb, sector XXXXX 或 buffer I/O error on device dm-0。这说明阵列卡已丢失对底层磁盘的控制权,但操作系统仍试图通过旧的设备路径发 IO——此时任何读写(包括 ls、df、fsck)都在往一个逻辑上“断联”的设备发请求,不仅得不到数据,还可能触发控制器内部状态错乱。

实操建议:

Zynq Linux Hardware Debug
Zynq Linux Hardware Debug

Zynq‑7000 / Zynq UltraScale+ 硬件调试技能。适用于 Xilinx Zynq(Cortex‑A9/A53 + FPGA)Linux 环境,调试 I2C、I2S、UART、GPIO 等外设。包括设备树配置、内核驱动、用户空间调试工具、交叉编译和常见问题排查,支持 PetaLinux 开发。

下载
  • 立刻执行 dmesg -T | grep -i "error\|fail\|offline",重点看时间戳集中在断电前后那一段;
  • 不要运行 smartctl -a /dev/sdb ——如果设备已从阵列卡逻辑视图中消失,smartctl 可能根本打不开设备,报 No such device 或卡住;
  • 用 lspci -vv -s $(lspci | grep -i raid | awk '{print $1}') 查阵列卡当前状态,关注 Kernel driver in use 是否还是 megaraid_sas(或对应驱动),若显示 unused,基本确认驱动已卸载或卡已失效;
  • 切勿尝试 mdadm --assemble 或 vgscan ——软件 RAID/LVM 工具依赖底层块设备可用,而此时设备节点可能还在,但实际已无响应。

megacli 或 storcli 连不上,先查供电和电池状态

阵列卡掉电后最常见的“假死”原因是缓存电池(BBU)失效或电源管理芯片锁死。很多卡在断电瞬间若 BBU 电量不足或固件异常,会直接进入保护模式:不响应命令、不刷新缓存、甚至拒绝重初始化。

实操建议:

  • 物理检查:打开机箱,确认阵列卡供电线(通常是 4pin 或 8pin 大4口)是否松动;BBU 指示灯是否熄灭或常红;
  • 重启前先拔掉阵列卡电源线 30 秒,再插回——这是绕过部分固件锁死的最有效软复位;
  • 若使用 LSI/Broadcom 卡,优先尝试 storcli /c0 show(/c0 是控制器 ID);若报 CLI Failed with status code: 0x10,大概率是卡未就绪,不是命令错;
  • 若 storcli 不可用,且系统是较老型号(如 Dell PERC 6/i),换用 megacli -AdpAllInfo -aALL,注意加 -aALL 而非 -a0,避免因控制器编号识别偏差漏检。

阵列配置还在但挂载失败,lost+found 里的数字名文件就是线索

当阵列卡恢复通信、LVM 卷组或 ext4 分区能被识别,但挂载后目录为空或报 Input/output error,说明文件系统元数据(尤其是 inode 表和目录项)在掉电瞬间被写坏。ext4 的 journal 可能来不及刷完,导致部分目录项残留为未链接状态,自动归入 lost+found。

实操建议:

  • 先以只读方式挂载:mount -o ro,noload /dev/mapper/vg0-lv_data /mnt/recover,noload 跳过 journal 重放,防止损坏扩大;
  • 进 /mnt/recover/lost+found,里面全是类似 #123456 的数字命名文件——这不是垃圾,是 ext4 找回的孤儿 inode;
  • 用 file /mnt/recover/lost+found/#123456 判断类型(如 “data”, “SQLite 3.x database”);
  • 若需还原原始路径,得结合 debugfs:debugfs -R "icheck 123456" /dev/mapper/vg0-lv_data 查 block 号,再用 debugfs -R "ncheck 123456" 反查路径(但成功率取决于目录项损坏程度);
  • 别指望 fsck.ext4 -y 自动修复——它会把大量未链接 inode 清进 lost+found,反而掩盖原始结构。

RAID 配置丢失时,mdadm --examine 和 dd 镜像必须同步做

硬件阵列卡掉电后若 BIOS/UEFI 中 RAID 配置彻底清空(表现为 lsblk 看不到 md 设备,/proc/mdstat 为空),说明卡的 NVRAM 中的元数据已损毁。此时不能靠卡自己重建,而要从每块物理盘的末尾扇区提取 RAID 元数据头(superblock)。

实操建议:

  • 先对每块盘做只读镜像:dd if=/dev/sdb of=/backup/sdb.img bs=4M conv=noerror,sync,noerror 和 sync 是关键,跳过读取失败扇区并保持偏移对齐;
  • 对镜像文件跑 mdadm --examine /backup/sdb.img,对比各盘的 Events :、Update Time :、Array Slot :,找时间最新、事件号最大的那组作为基准;
  • 若某盘 mdadm --examine 报 No md superblock detected,不代表没 RAID 头——可能是头在非默认位置,用 hexdump -C -n 1024 /backup/sdb.img | grep -A2 -B2 "md" 手动搜特征;
  • 组合成功后,用 mdadm --assemble --force --run /dev/md0 /dev/sdb /dev/sdc ... 强制启动,--force 绕过一致性校验,--run 强制激活降级阵列;
  • 此过程风险极高:一旦选错盘序或元数据版本,mdadm 可能写坏 superblock。务必确保所有操作基于镜像,原始盘全程只读。
真正麻烦的从来不是“找不到数据”,而是“以为还能写”。阵列卡掉电后的第一分钟,决定后续是恢复还是二次覆写——所有命令都该带 ro、noerror、--dry-run(如果支持),宁可慢,不可错。

相关专题

更多
磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

2023.06.21

3990

4

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

2023.06.29

3413

10

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2023.06.30

2573

5

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

2023.07.05

6250

7

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

2023.07.06

5882

7

linux查看文件夹大小
linux查看文件夹大小

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。linux怎么查看文件夹大小呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.20

3433

8

linux查看ip命令
linux查看ip命令

本专题为大家提供linux查看ip命令相关文章内容,感兴趣的朋友可以免费下载体验试试。

2023.07.20

2925

4

linux查看cpu使用率
linux查看cpu使用率

在linux的系统维护中,可能需要经常查看cpu使用率,分析系统整体的运行情况。本专题为大家带来了linux查看cpu使用率的相关文章,感兴趣的朋友千万不要错过了。

2023.07.25

3159

6

linux查找文件命令
linux查找文件命令

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.31

297

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习