Linux怎么在虚拟化基础设施崩溃后按正确顺序逐步启动底层组件

陌敏酱_8394

陌敏酱_8394

2026-10-16

768人浏览

原创

必须先确认hypervisor状态:esxi用vim-cmd vmsvc/getallvms验证hostd运行,kvm用virsh list --all检查libvirtd连接;若失败则先启动服务而非直接操作vm,避免因驱动、存储、网络未就绪导致恢复失败。

linux怎么在虚拟化基础设施崩溃后按正确顺序逐步启动底层组件

虚拟化宿主机崩溃后,先确认 Hypervisor 状态再动系统

宿主机一崩,所有虚拟机都停摆,但恢复顺序不能从 VM 开始。必须先验证 Hypervisor 本身是否存活、能否接管资源。比如在 ESXi 上,vim-cmd vmsvc/getallvms 能列出已注册的虚拟机;KVM 环境下运行 virsh list --all,如果命令卡住或报 connection refused,说明 libvirtd 进程没起来,得先 systemctl start libvirtd,而不是急着 virsh start 某个 VM。

常见错误是跳过这步直接进救援模式挂载 VM 磁盘修配置——结果发现宿主机连桥接网卡都没加载,br0 不存在,iptables 规则全丢,修了 VM 配置也起不来。

  • ESXi:检查 DCUI(Direct Console User Interface)界面是否显示 “Hostd started” 或 “Management agents running”
  • KVM:确认 /proc/sys/net/bridge/bridge-nf-call-iptables 是 1,否则虚拟网络转发失效
  • 云平台自建 KVM:留意 dnsmasq 是否随 libvirtd 自启,否则 VM 启动后拿不到 DHCP 地址

启动顺序不是“先内核再服务”,而是“先设备驱动再存储栈再网络”

宿主机恢复后,别急着 systemctl start 任何服务。Linux 在虚拟化场景下,systemd 的依赖链常被硬件抽象层打断。比如 RAID 卡驱动没加载,/dev/md0 就不会出现,后续所有挂载 /mnt/data 的服务都会超时失败,但日志里只写 Dependency failed for Local File Systems,不提根本原因。

实操建议按以下顺序手动触发关键单元:

  • 先等 systemd-udev-settle.service 完成(或用 udevadm settle),确保所有块设备节点就位
  • 运行 lsblk -f 看 LVM / md / ZFS 池是否激活;若否,手动 vgchange -ay 或 zpool import -a
  • 检查 systemctl status systemd-networkd,确认 br0 或 ovs-system 已 up;否则 virsh net-start default 会静默失败
  • 最后才 systemctl start libvirtd,且观察 journalctl -u libvirtd -n 50 --no-pager 里有没有 Failed to connect to storage pool

VM 启动失败时,别只看 guest 日志,先查宿主机的 dmesg 和 libvirt 域日志

一个典型现象:VM 在 virsh start 后立刻变成 shut off,virsh console 连不上,journalctl -u libvirtd 只有 domain event 'stopped'。这时候翻 guest 里的 /var/log/messages 毫无意义——问题根本不在里面。

Zynq Linux Hardware Debug
Zynq Linux Hardware Debug

Zynq‑7000 / Zynq UltraScale+ 硬件调试技能。适用于 Xilinx Zynq(Cortex‑A9/A53 + FPGA)Linux 环境,调试 I2C、I2S、UART、GPIO 等外设。包括设备树配置、内核驱动、用户空间调试工具、交叉编译和常见问题排查,支持 PetaLinux 开发。

下载

真正该查的是:

  • dmesg -T | grep -i "kvm\|vfio\|iommu":确认 CPU 是否开启虚拟化(svm 或 vmx)、IOMMU 是否启用(影响直通设备)
  • cat /var/log/libvirt/qemu/<vm-name>.log</vm-name>:里面通常有 QEMU 启动时的完整参数和报错,比如 qcow2: Image is corrupt; cannot be opened read/write
  • virsh domstate <vm-name> --reason</vm-name>:返回具体终止原因,如 crashed、panicked 或 shutdown

特别注意:某些旧版 libvirt 在存储池路径含空格或中文时会静默失败,virsh pool-dumpxml 输出里若看到   或乱码路径,就得重定义池。

自动恢复策略要区分“重启即恢复”和“需人工干预”的边界

很多人给 VM 配 on_crash = restart 或 on_reboot = restart,以为能兜底。但实际中,90% 的 VM 崩溃不是 guest 内部问题,而是宿主机资源不足或存储中断。盲目自动重启只会让磁盘 I/O 队列雪崩,甚至触发宿主机 OOM Killer 杀掉 kswapd 进程,形成死循环。

更稳妥的做法是分层设置:

  • 对数据库类 VM:禁用自动重启,改用 on_crash = preserve,保留内存镜像供事后 virsh dump 分析
  • 对无状态 Web VM:设 on_reboot = restart,但加 startup_delay = 30,错开启动时间避免并发 IO 峰值
  • 所有 VM 的 memoryBacking 必须配 hugepages=1 和 locked=1,否则宿主机内存紧张时,qemu-kvm 进程会被 swap 出去,导致 VM 假死

最易被忽略的一点:libvirtd 自身的 RestartSec=10 在 systemd 里默认是关闭的。一旦它因 cgroup 内存限制被 OOM Killer 干掉,就不会自动拉起——得手动在 /etc/systemd/system/multi-user.target.wants/libvirtd.service 里补上 Restart=always 和 RestartSec=5。

相关专题

更多
磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

2023.06.21

4050

4

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

2023.06.29

3453

10

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2023.06.30

2633

5

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

2023.07.05

6410

7

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

2023.07.06

6042

7

linux查看文件夹大小
linux查看文件夹大小

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。linux怎么查看文件夹大小呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.20

3513

8

linux查看ip命令
linux查看ip命令

本专题为大家提供linux查看ip命令相关文章内容,感兴趣的朋友可以免费下载体验试试。

2023.07.20

3005

4

linux查看cpu使用率
linux查看cpu使用率

在linux的系统维护中,可能需要经常查看cpu使用率,分析系统整体的运行情况。本专题为大家带来了linux查看cpu使用率的相关文章,感兴趣的朋友千万不要错过了。

2023.07.25

3239

6

linux查找文件命令
linux查找文件命令

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.31

297

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习

Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习