gc等待高是私网延迟、lms过载、ges队列积压中至少两个指标同步逼近阈值的综合信号,需同步排查三者:私网延迟须用ping -c 10测所有节点对,avg>0.5ms即干预;lms cpu持续>50%即危险;ges队列cum_queue_time>100ms预警、>500ms已风暴。

GC等待高不是单点故障,而是私网延迟、LMS过载、GES队列积压三者中至少两个同步逼近阈值的信号;只调一个参数或只换网卡,大概率无效。
查私网延迟:必须用ping -c 10测所有节点对
Oracle RAC对私网延迟极其敏感,gc current request和gc cr block 2-way首跳延迟直接受其影响。文档明确要求:avg > 0.5ms就必须干预。
- 必须用私网IP(不是VIP或public IP),且在所有节点两两之间都跑一遍,例如
node1 → node2、node1 → node3、node2 → node3 - 加
-c 10避免单次抖动误判,重点关注avg而非mdev - 若某对节点间
avg > 0.5ms,立刻检查交换机buffer、jumbo frame是否全链路一致——MTU必须都是9000,混用1500是常见死因
看LMS进程CPU:持续>50%就是危险信号
LMS是GC流量的最终承压点,CPU不是“越高越好”,而是“不能持续>50%”。一旦超限,gc current block congested会指数级上升,因为GES消息队列开始积压。
- 用
ps -eo pid,pcpu,comm | grep lms找持续>50%的PID;更稳妥的是ps -eo pid,ppid,pcpu,pmem,comm --sort=-pcpu | grep lms,确认是不是某个lms0或lms1单点吃满 - 结合
cat /proc/<pid>/stack</pid>看内核栈——若卡在kslgetl或skgxp_receive,基本是锁争用或网络收包卡住 - 检查
GCS_SERVER_PROCESSES参数值是否匹配物理CPU核数(例如16核应设为4~6,不是默认的2)
验GES队列深度:用gv$ges_enqueue.cum_queue_time求和
cum_queue_time是GES层消息排队总耗时(单位毫秒),它不反映单次等待,而暴露系统级吞吐瓶颈。>100ms是预警线,>500ms基本已触发重试风暴。
- 执行SQL:
SELECT inst_id, SUM(cum_queue_time) queue_ms FROM gv$ges_enqueue GROUP BY inst_id ORDER BY queue_ms DESC; - 如果某实例
queue_ms显著高于其他(比如3倍以上),优先查该节点的LMS和私网 - 若所有实例都高,但私网延迟正常,则大概率是全局热点块(如序列索引页、高频更新配置表)引发的连锁请求
- 注意:该视图需在等待高峰期间采样,空闲期查不到真实压力
关联等待链:用oradebug -g all hanganalyze 3抓传导路径
GC等待很少孤立存在。典型恶化路径是:gc current request延迟升高 → 远程块获取变慢 → 本地会话排队等块 → 触发gc buffer busy acquire → 更多会话卡住 → LMS负载反向飙升。
- 执行
oradebug -g all hanganalyze 3,重点识别类似'gc current request'这样的传导链 - 若发现
gc buffer busy acquire大量上升,先别急着调GC参数,要查是否本地LRU链竞争或热点块被反复访问 - AWR里
gc cr block busy集中在1ms/4ms桶,说明是锁争用或SQL问题;突增于16ms桶,才是网络抖动
真正难处理的不是单个指标超标,而是多个瓶颈耦合——比如私网延迟刚超0.5ms,LMS CPU又卡在48%,GES队列正缓慢爬升到300ms,此时任何单项调整都会被另一个瓶颈拖回原点。必须同步采集、交叉验证、协同收敛。











