如何排查Oracle RAC私网Bonding绑定失效的高可用隐患

星伟同学_1380

星伟同学_1380

2026-11-20

209人浏览

原创

排查oracle rac私网bonding绑定失效的高可用隐患,核心在于确认操作系统层面的网络接口状态与rac集群软件(crs)的感知是否一致。具体做法是检查`ifenslave`或`/sys/class/net`下的成员关系,验证`crsctl stat res -t`中`ora.net1.network`等资源的`online`状态及绑定的ip地址,并审查`/var/log/messages`中关于网卡链路抖动或bonding模式切换的日志。若发现私网心跳中断但物理链路正常,通常是因为bonding驱动未正确接管故障转移,导致rac节点间通信超时从而触发实例驱逐。

如何排查Oracle RAC私网Bonding绑定失效的高可用隐患

如何验证Linux系统层Bonding配置是否正确生效

验证Bonding配置是否生效,需直接查询内核模块加载状态及虚拟接口的属性文件。通过`cat /proc/net/bonding/bondX`命令可以查看当前活动的Slave网卡、负载均衡算法以及主备状态。如果该文件不存在或内容为空,说明`bonding`模块未加载或配置未应用。同时,使用`ip link show bondX`检查接口状态是否为`UP`,并通过`ethtool bondX`确认聚合速率和双工模式是否与物理网卡匹配。只有当所有Slave网卡在`/proc/net/bonding/bondX`中均显示为`up`且Master接口处于`UP`状态时,系统层的绑定才被视为有效。

如何排查Oracle RAC私网Bonding绑定失效的高可用隐患

#!/bin/bash
# 检查Bonding状态脚本 check_bond.sh
BOND_IF="bond0"
SLAVE_IFS=("eth1" "eth2")

# 1. 检查bonding模块是否加载
if ! lsmod | grep -q bonding; then
    echo "ERROR: bonding module not loaded"
    exit 1
fi

# 2. 检查/proc/net/bonding是否存在
if [ ! -f /proc/net/bonding/$BOND_IF ]; then
    echo "ERROR: $BOND_IF bonding info not found in /proc"
    exit 1
fi

# 3. 解析Slave状态
ACTIVE_SLAVES=$(grep -c "Slave Interface.*up" /proc/net/bonding/$BOND_IF)
TOTAL_SLAVES=${#SLAVE_IFS[@]}

if [ "$ACTIVE_SLAVES" -eq "$TOTAL_SLAVES" ]; then
    echo "SUCCESS: All $TOTAL_SLAVES slaves are up on $BOND_IF"
else
    echo "WARNING: Only $ACTIVE_SLAVES of $TOTAL_SLAVES slaves are up"
    cat /proc/net/bonding/$BOND_IF
fi

# 4. 检查RAC网络资源关联
ocrcheck || crsctl stat res -t | grep -i network

运行上述脚本后,预期输出应显示所有配置的Slave网卡状态均为`up`。若某张物理网卡显示为`down`,则需进一步检查该网卡的物理连接及驱动状态。同时,`ocrcheck`用于确认OCR磁盘组可访问性,而`crsctl stat res`的输出中,`ora.net1.network`等资源必须显示为`ONLINE`,且其`TARGET`状态为`ONLINE`。如果网络资源显示为`OFFLINE`或`STARTING`,则表明RAC未能通过Bonding接口建立心跳,此时需结合日志分析原因。

如何定位RAC集群因私网心跳丢失导致的节点驱逐

定位RAC集群因私网心跳丢失导致的节点驱逐,关键在于分析`alert.log`和`evmd.log`中的时间戳对齐信息。当Bonding失效导致心跳包发送失败时,Evma进程会记录`Network interface down`或`Heartbeat timeout`错误。随后,CSS进程会检测到其他节点的响应超时,并在`cssd.log`中生成`Disk timeout`或`Network timeout`事件。最终,OCD进程会根据表决盘的状态决定驱逐节点。排查时需对比各节点`alert.log`中`PMON`进程报错的时间点,若多个节点在同一时间段内出现私网通信中断,且伴随`ORA-29701`或`ORA-29702`错误,则可确认为私网Bonding问题引发的集群分裂。

QuantOracle
QuantOracle

63个确定性量化金融计算器 + 10个通过MCP的复合工作流。期权定价、Greeks、奇异衍生品、风险指标、投资组合优化……

下载

如何排查Oracle RAC私网Bonding绑定失效的高可用隐患

-- SQL*Plus 会话示例:检查集群节点状态及网络资源
-- 以grid用户执行

-- 1. 检查集群整体状态
$ crsctl check cluster -all

-- 2. 详细查看所有资源状态,重点关注网络资源
$ crsctl stat res -t -init

-- 3. 检查特定网络资源的属性
$ crsctl stat res ora.net1.network -p | grep -E "(NETWORK|IFNAME|TYPE)"

-- 4. 查看最近一次的节点驱逐记录(需root用户)
$ tail -n 100 /var/log/crsd/crsd.log | grep -i "evict\|timeout\|network"

-- 5. 检查OS层面网卡统计丢包情况
$ ethtool -S eth1 | grep drop
$ ethtool -S eth2 | grep drop

在执行上述命令后,预期结果应显示所有节点状态为`ONLINE`,且`ora.net1.network`的资源状态为`ONLINE`。若`crsctl stat res -t`显示某个节点上的网络资源为`OFFLINE`,则需检查该节点上的`ifcfg-bond0`配置文件是否正确指向了物理网卡。同时,`ethtool -S`输出的丢包计数若持续增加,表明物理链路存在质量问题,即使Bonding逻辑上存活,实际数据传输也会失败。通过对比`crsd.log`中的驱逐时间与`ethtool`的丢包激增时间点,可以精确锁定故障根源是配置错误还是硬件故障。

基于Bonding模式为active-backup时的故障切换测试

基于Bonding模式为`active-backup`时的故障切换测试,旨在验证当主用物理网卡断开时,备用网卡能否无缝接管心跳流量。具体做法是在一个节点上手动禁用主用Slave网卡(如`ifconfig eth1 down`),然后立即观察RAC集群状态及另一节点的心跳响应。若切换成功,`crsctl stat res -t`应保持所有资源`ONLINE`,且`ping`私网IP的延迟不应有显著波动。若切换失败,集群可能记录`Network unreachable`错误,甚至触发节点驱逐。此测试需在维护窗口进行,并确保有回退方案,因为频繁的链路抖动可能导致集群不稳定。

# 故障切换测试脚本 test_failover.sh
NODE_A="rac1.example.com"
NODE_B="rac2.example.com"
BOND_IF="bond0"
PRIMARY_SLAVE="eth1"
SECONDARY_SLAVE="eth2"

# 在Node A上执行
ssh $NODE_A "ifconfig $PRIMARY_SLAVE down"

# 等待几秒让Bonding机制切换
sleep 5

# 检查Node A上的Bonding状态
ssh $NODE_A "cat /proc/net/bonding/$BOND_IF | grep 'Slave Interface'"

# 从Node B ping Node A的私网IP,检查连通性
PING_RESULT=$(ping -c 5 $(hostname -I | grep -oP '(?
<p>测试完成后,预期结果应为Node A的`/proc/net/bonding/bond0`显示`Secondary Slave`变为活动状态,且Node B到Node A的Ping测试成功率保持100%。若Ping测试出现丢包或超时,说明Bonding的故障切换机制未正常工作,可能是由于ARP监控配置错误或交换机端口配置不匹配。此时需检查`/etc/modprobe.d/bonding.conf`中的参数设置,确保`miimon`或`arp_interval`值合理,以便快速检测链路故障。恢复网卡后,需再次验证主备角色是否按预期切换回来,确保集群长期运行的稳定性。</p>

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

oracle

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
oracle清空表数据
oracle清空表数据

当表中的数据不需要时,则应该删除该数据并释放所占用的空间。本专题为大家提供oracle清空表数据的相关文章,帮助大家解决该问题。

2023.08.16

1201

5

Oracle中declare的使用
Oracle中declare的使用

Oracle DECLARE语句是PL/SQL编程语言中用于声明变量、常量、游标或异常的关键字。它的主要作用是在程序中定义这些对象,以便在后续的代码中使用。DECLARE语句的语法简单明了,可以根据需要声明多个对象。通过使用这些声明的对象,可以进行各种操作,如计算、查询数据库、处理异常等 。

2023.09.15

3593

5

oracle怎么分页
oracle怎么分页

实现分页的步骤:1、使用ROWNUM进行分页查询;2、在执行查询之前进行设置分页参数;3、使用"COUNT(*)"函数来获取总行数,并使用"CEIL"函数来向上取整计算总页数;4、在外部查询中使用"WHERE"子句来筛选出特定的行号范围,以实现分页查询。想了解更多oracle怎么分页的文章,可以来阅读本专题先的文章。

2023.09.18

3590

5

Oracle查看表操作历史记录
Oracle查看表操作历史记录

查看操作历史记录的方法:1、使用Oracle内置的审计功能,可以记录数据库中发生的各种操作,包括登录、DDL语句、DML语句等;2、使用Oracle日志文件,其中包含了数据库中发生的各种操作,可以通过查看日志文件来获取操作历史记录;3、使用Oracle的Flashback功能,可以查看数据库在某个时间点的操作历史记录;4、使用第三方工具等。本专题还提供其他查看表操作的文章,大家可以免费阅读。

2023.09.19

2049

3

Oracle中RAC的用法
Oracle中RAC的用法

Oracle中RAC的用法:1、通过在多个服务器上运行数据库实例来提供高可用性;2、允许在需要时增加或减少节点数量;3、通过将工作负载分布到多个节点上来实现负载均衡;4、使用共享存储来实现多个节点之间的数据共享;5、允许多个节点同时处理数据库请求,从而实现并行处理;6、提供了透明故障切换功能;7、使用了一些技术来确保数据的一致性;8、提供了管理工具来简化RAC环境的管理和维护。本专题还提供RAC相关的其他文章,大家可以免费阅读。

2023.09.19

2653

7

oracle imp
oracle imp

imp是Oracle数据库中的一个命令行工具,用于将导出的数据和对象从一个数据库实例导入到另一个数据库实例。imp命令的一般语法为“imp username/password@connect_string file=file_name [options]”。

2023.09.19

3769

4

常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.02

5069

19

oracle通配符有哪些
oracle通配符有哪些

oracle通配符有“%”、“_”、“[]”和“[^]"。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.11.08

277

5

oracle四舍五入怎么操作
oracle四舍五入怎么操作

oracle四舍五入操作可以使用ROUND函数来实现,其语法为“ROUND(number, decimal_places)”,其中,number是要进行四舍五入的数值,decimal_places是指定的小数位数。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.11.14

986

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程