在Oracle 11g中如何快速定位节点被驱逐的根本原因?

云强小哥_5131

云强小哥_5131

2026-11-19

966人浏览

原创

节点被驱逐后应优先分析ocssd.log,重点检查CRS-1611(75%心跳丢失)、CRS-1610(90%丢失)、CRS-1607(正式驱逐)是否密集递进出现;多节点同步发生指向网络抖动,单节点独发则聚焦本端物理层异常。

在oracle 11g中如何快速定位节点被驱逐的根本原因?

直接看 ocssd.log 里的 CRS-1611/1610/1607 三连报错

节点被驱逐后,alert.log 和 crsd.log 只记录结果(比如 “Reconfiguration started”),不体现心跳断在哪一环;真正做驱逐决策的是 ocssd.bin 进程,它的全部判断依据都在 /oracle/11.2.0/grid/log//cssd/ocssd.log 里。

必须搜索这三类错误,并确认它们是否在时间上密集、递进出现:

  • CRS-1611:75% 心跳未收到,后面带的时间值(如 in 6.512 seconds)越小,说明网络恢复窗口越窄
  • CRS-1610:90% 心跳丢失,集群已进入驱逐倒计时,开始准备投票
  • CRS-1607:明确写 Node is being evicted,是正式驱逐动作

如果多个节点在同一分钟内都打出这三连报错,基本可排除单点故障,直接指向底层网络抖动;若仅节点 A 报 CRS-1612: this node was evicted by node X,而节点 X 的 ocssd.log 里没有对应 CRS-1610,那大概率是节点 A 自身收包异常(网卡丢包、中断风暴),不是对端问题。

别被 CRS-1611 单独出现带偏节奏

CRS-1611 单独出现、很快恢复,说明只是瞬时抖动,不构成驱逐条件;反复出现“CRS-1611 → CRS-1610 → CRS-1607”闭环,才必须深挖。

此时不能急着调 _gc_affinity_time 或改 misscount,先做底层验证:

  • 跑 ethtool -S eth2 | grep -E "(rx_discards|rx_errors|tx_aborted_errors)"——只要非零,就是驱动、交换机 QoS 或物理链路问题
  • 用 ping -c 100 -i 0.1 看延迟分布:>5ms 的包占比超过 5%,GC 等待就会明显上扬
  • 检查是否私网 IP 被占用:arping -I eth2 -c 3 ,若收到非本机响应,说明 IP 冲突——这是 11gR2 常见重启诱因
  • 确认网卡绑定模式:cat /proc/net/bonding/bond0,mode=1(active-backup)下主备切换失败也会导致心跳断

区分网络心跳和磁盘心跳的线索

网络心跳由 ocssd.bin 每秒主动发包,超 misscount(默认 30 秒)未收到即触发告警链;磁盘心跳也由它定期写入 voting disk,但日志中不显式打印 “disk heartbeat lost”。

QuantOracle
QuantOracle

63个确定性量化金融计算器 + 10个通过MCP的复合工作流。期权定价、Greeks、奇异衍生品、风险指标、投资组合优化……

下载

需交叉判断:

  • 如果 ocssd.log 里 CRS-1611 伴随 CRS-1614(磁盘 I/O 超时),优先查 ASM diskgroup 状态、多路径健康、存储链路或 voting disk 所在 LUN 的响应延迟
  • 若只有 CRS-1611,没后续 CRS-1610/1607,且磁盘路径(ls -l /dev/oracleasm/disks/)和 crsctl query css votedisk 都正常,则问题几乎一定在私网

为什么不能只依赖 olsnodes -n -i -s 或 crsctl check cluster -all

这些命令返回的是“当前状态”,不是“故障发生时的状态”。节点被驱逐后可能已自动重启并重新加入集群,此时 olsnodes 显示所有节点在线,crsctl check cluster -all 返回 SUCCESS,完全掩盖了真实问题。

必须结合时间戳回溯:

  • 先从 ocssd.log 中找到 CRS-1607 时间点(例如 2026-10-25 14:22:18.123)
  • 再去同一节点的 /oracle/11.2.0/grid/log//client/ 下找 sqlnet.log 或 crsctl.log,确认该时刻前后是否有连接中断记录
  • 最后比对其他节点同时间段的 ocssd.log,看是否同步出现告警——不同步则本端问题,同步则网络或共享存储共性问题

真正容易被忽略的是:ocssd.log 默认只保留最近 10 个滚动文件,驱逐发生后若未及时归档,关键日志可能已被覆盖;建议在集群稳定期就配置 logrotate 或定时 cp 到安全路径。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

oracle oracle 11g

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
oracle清空表数据
oracle清空表数据

当表中的数据不需要时,则应该删除该数据并释放所占用的空间。本专题为大家提供oracle清空表数据的相关文章,帮助大家解决该问题。

2023.08.16

1181

5

Oracle中declare的使用
Oracle中declare的使用

Oracle DECLARE语句是PL/SQL编程语言中用于声明变量、常量、游标或异常的关键字。它的主要作用是在程序中定义这些对象,以便在后续的代码中使用。DECLARE语句的语法简单明了,可以根据需要声明多个对象。通过使用这些声明的对象,可以进行各种操作,如计算、查询数据库、处理异常等 。

2023.09.15

3573

5

oracle怎么分页
oracle怎么分页

实现分页的步骤:1、使用ROWNUM进行分页查询;2、在执行查询之前进行设置分页参数;3、使用"COUNT(*)"函数来获取总行数,并使用"CEIL"函数来向上取整计算总页数;4、在外部查询中使用"WHERE"子句来筛选出特定的行号范围,以实现分页查询。想了解更多oracle怎么分页的文章,可以来阅读本专题先的文章。

2023.09.18

3570

5

Oracle查看表操作历史记录
Oracle查看表操作历史记录

查看操作历史记录的方法:1、使用Oracle内置的审计功能,可以记录数据库中发生的各种操作,包括登录、DDL语句、DML语句等;2、使用Oracle日志文件,其中包含了数据库中发生的各种操作,可以通过查看日志文件来获取操作历史记录;3、使用Oracle的Flashback功能,可以查看数据库在某个时间点的操作历史记录;4、使用第三方工具等。本专题还提供其他查看表操作的文章,大家可以免费阅读。

2023.09.19

2029

3

Oracle中RAC的用法
Oracle中RAC的用法

Oracle中RAC的用法:1、通过在多个服务器上运行数据库实例来提供高可用性;2、允许在需要时增加或减少节点数量;3、通过将工作负载分布到多个节点上来实现负载均衡;4、使用共享存储来实现多个节点之间的数据共享;5、允许多个节点同时处理数据库请求,从而实现并行处理;6、提供了透明故障切换功能;7、使用了一些技术来确保数据的一致性;8、提供了管理工具来简化RAC环境的管理和维护。本专题还提供RAC相关的其他文章,大家可以免费阅读。

2023.09.19

2653

7

oracle imp
oracle imp

imp是Oracle数据库中的一个命令行工具,用于将导出的数据和对象从一个数据库实例导入到另一个数据库实例。imp命令的一般语法为“imp username/password@connect_string file=file_name [options]”。

2023.09.19

3729

4

常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.02

5049

19

oracle通配符有哪些
oracle通配符有哪些

oracle通配符有“%”、“_”、“[]”和“[^]"。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.11.08

277

5

oracle四舍五入怎么操作
oracle四舍五入怎么操作

oracle四舍五入操作可以使用ROUND函数来实现,其语法为“ROUND(number, decimal_places)”,其中,number是要进行四舍五入的数值,decimal_places是指定的小数位数。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.11.14

986

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程