为什么Oracle RAC的ASM磁盘出现IO超时导致集群重启

秋静酱_4509

秋静酱_4509

2026-09-12

363人浏览

原创

asm磁盘io超时直接触发rac节点驱逐,因ocssd将超时视为节点失联硬信号,立即执行强制重启以防止脑裂;根因多在底层存储链路不可靠,如multipath切换失败、asmlib残留干扰afd、磁盘头元数据损坏、私网丢包叠加io延迟等。

为什么oracle rac的asm磁盘出现io超时导致集群重启

ASM磁盘IO超时直接触发节点驱逐

Oracle RAC不是“报错后重试”,而是把IO超时当作节点健康失效的硬信号。一旦ocssd进程检测到某节点对OCR或voting disk的I/O响应超过默认60秒(_css_misscount隐含参数控制),就判定该节点失联,立即发起驱逐(eviction)。被驱逐节点上的oracssdagent收到指令后会主动触发主机重启——这是RAC防止脑裂的强制保护机制,不是系统崩溃,是设计行为。

IO超时背后的真实存储链路断裂

常见根因不在ASM层,而在底层设备路径不可靠:

  • 多路径(multipath)切换失败:比如mpathb在节点1走的是路径A,节点2却走路径B,其中一条链路中断后,ASMLib仍尝试访问已失效的/dev/sdb(而非/dev/mapper/mpathb),导致IO hang
  • ASMLib残留干扰AFD:若lsmod | grep oracleasm有输出,说明ASMLib内核模块仍在运行,它会劫持I/O路径,绕过multipath和AFD的故障切换逻辑,使单点链路故障无法恢复
  • 磁盘头元数据损坏:用kfed read /dev/mapper/mpathb看到KFED-00322: Invalid OSM block type,说明ASMLib曾覆写磁盘头,破坏了ASMFD识别所需的AFD签名
  • 私网丢包叠加IO延迟:OCSSD心跳依赖UDP 12345端口,若私网丢包率高,会放大IO等待时间,使原本可恢复的IO延迟被误判为永久性故障

为什么crsctl stat res -t看起来正常但实际已瘫痪

资源状态显示ONLINE只代表CRS试图启动过ora.asm,不代表ASM实例真能读写磁盘:

Agent Git Oracle
Agent Git Oracle

高级仓库分析与重构指南。基于AI推理识别技术债务与架构反模式。

下载
  • ora.asm进程存在,但v$asm_diskgroup里对应磁盘组状态是DISMOUNTED或查不到任何行
  • asmcmd lsdg返回空或报ORA-15032,但ps -ef | grep asm_pmon能看到进程——说明ASM实例起来了,只是无法访问底层设备
  • 关键线索在$GRID_HOME/log/<hostname>/cssd/ocssd.log</hostname>里反复出现IPC Send timeoutFailed to connect to CSS daemon,这往往意味着OCR磁盘组根本没挂上,CSS连不到自己的心跳盘

排查必须从存储设备层开始,不能只看数据库日志

数据库alert.log里一堆ORA-15064ORA-29770只是结果,不是原因。真正要盯住的是:

  • 所有节点执行multipath -ll,确认OCR所在磁盘(如mpathc)的路径数、active状态是否一致;若有节点少两条路径,立刻查光纤交换机zone或HBA卡状态
  • dd if=/dev/zero of=/dev/mapper/mpathc bs=4k count=100 oflag=direct手动测裸设备写入延时,>500ms即危险
  • 检查/etc/multipath.confpath_grouping_policy是否为multibus(非failover),否则多路径不生效
  • 确认asmcmd afd_lsdsk输出中OCR盘状态为a(available),而非?或空——?表示AFD无法解析设备,大概率是udev规则缺失或ASMLib残留

最易被忽略的是:节点间/dev/mapper/下设备名一致,但scsi_id -g -u -d /dev/sda输出的WWID不一致。这意味着multipath底层设备映射错位,AFD无法跨节点识别同一块盘,集群必然分裂。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
oracle清空表数据
oracle清空表数据

当表中的数据不需要时,则应该删除该数据并释放所占用的空间。本专题为大家提供oracle清空表数据的相关文章,帮助大家解决该问题。

2023.08.16

821

5

Oracle中declare的使用
Oracle中declare的使用

Oracle DECLARE语句是PL/SQL编程语言中用于声明变量、常量、游标或异常的关键字。它的主要作用是在程序中定义这些对象,以便在后续的代码中使用。DECLARE语句的语法简单明了,可以根据需要声明多个对象。通过使用这些声明的对象,可以进行各种操作,如计算、查询数据库、处理异常等 。

2023.09.15

2213

5

oracle怎么分页
oracle怎么分页

实现分页的步骤:1、使用ROWNUM进行分页查询;2、在执行查询之前进行设置分页参数;3、使用"COUNT(*)"函数来获取总行数,并使用"CEIL"函数来向上取整计算总页数;4、在外部查询中使用"WHERE"子句来筛选出特定的行号范围,以实现分页查询。想了解更多oracle怎么分页的文章,可以来阅读本专题先的文章。

2023.09.18

2250

5

Oracle查看表操作历史记录
Oracle查看表操作历史记录

查看操作历史记录的方法:1、使用Oracle内置的审计功能,可以记录数据库中发生的各种操作,包括登录、DDL语句、DML语句等;2、使用Oracle日志文件,其中包含了数据库中发生的各种操作,可以通过查看日志文件来获取操作历史记录;3、使用Oracle的Flashback功能,可以查看数据库在某个时间点的操作历史记录;4、使用第三方工具等。本专题还提供其他查看表操作的文章,大家可以免费阅读。

2023.09.19

1309

3

Oracle中RAC的用法
Oracle中RAC的用法

Oracle中RAC的用法:1、通过在多个服务器上运行数据库实例来提供高可用性;2、允许在需要时增加或减少节点数量;3、通过将工作负载分布到多个节点上来实现负载均衡;4、使用共享存储来实现多个节点之间的数据共享;5、允许多个节点同时处理数据库请求,从而实现并行处理;6、提供了透明故障切换功能;7、使用了一些技术来确保数据的一致性;8、提供了管理工具来简化RAC环境的管理和维护。本专题还提供RAC相关的其他文章,大家可以免费阅读。

2023.09.19

1893

7

oracle imp
oracle imp

imp是Oracle数据库中的一个命令行工具,用于将导出的数据和对象从一个数据库实例导入到另一个数据库实例。imp命令的一般语法为“imp username/password@connect_string file=file_name [options]”。

2023.09.19

2429

4

常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.02

4009

19

oracle通配符有哪些
oracle通配符有哪些

oracle通配符有“%”、“_”、“[]”和“[^]"。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.11.08

237

5

oracle四舍五入怎么操作
oracle四舍五入怎么操作

oracle四舍五入操作可以使用ROUND函数来实现,其语法为“ROUND(number, decimal_places)”,其中,number是要进行四舍五入的数值,decimal_places是指定的小数位数。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.11.14

626

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程