gc等待事件过高是私网延迟、lms过载、ges队列积压中至少两个同步逼近阈值的综合信号,需同步排查三者并协同优化,单项调整大概率无效。
gc等待事件过高不是单一问题,而是私网延迟、lms过载、ges队列积压三者中至少两个同步逼近阈值的综合信号。只调一个参数或只换一块网卡,大概率无效。
查私网延迟:必须用ping -c 10测所有节点对
Oracle RAC对私网延迟极其敏感,gc current request和gc cr block 2-way的首跳延迟直接受其影响。文档说“ 0.5ms就必须干预。
- 必须用私网IP(不是VIP或public IP),且在所有节点两两之间都跑一遍,比如
node1 → node2、node1 → node3、node2 → node3 - 加
-c 10避免单次抖动误判,重点关注avg而非mdev - 若某对节点间
avg > 0.5ms,立刻检查交换机buffer、jumbo frame是否全链路一致——MTU必须都是9000,混用1500是常见死因
看LMS进程CPU:持续>50%就是危险信号
LMS是GC流量的最终承压点,CPU不是“越高越好”,而是“不能持续>50%”。一旦超限,gc current block congested会指数级上升,因为GES消息队列开始积压。
- 用
ps -eo pid,pcpu,comm | grep lms找持续>50%的PID;更稳妥的是ps -eo pid,ppid,pcpu,pmem,comm --sort=-pcpu | grep lms,确认是不是某个lms0或lms1单点吃满 - 结合
cat /proc/<pid>/stack</pid>看内核栈——若卡在kslgetl或skgxp_receive,基本是锁争用或网络收包卡住 - 检查
GCS_SERVER_PROCESSES参数值是否匹配物理CPU核数(例如16核应设为4~6,不是默认的2)
验GES队列深度:用gv$ges_enqueue.cum_queue_time求和
cum_queue_time是GES层消息排队总耗时(单位毫秒),它不反映单次等待,而暴露系统级吞吐瓶颈。>100ms是预警线,>500ms基本已触发重试风暴。
- 执行SQL:
SELECT inst_id, SUM(cum_queue_time) queue_ms FROM gv$ges_enqueue GROUP BY inst_id ORDER BY queue_ms DESC; - 如果某实例
queue_ms显著高于其他(比如3倍以上),优先查该节点的LMS和私网 - 若所有实例都高,但私网延迟正常,则大概率是全局热点块(如序列索引页、高频更新配置表)引发的连锁请求
- 注意:该视图需在等待高峰期间采样,空闲期查不到真实压力
关联等待链:用hanganalyze 3抓传导路径
GC等待很少孤立存在。典型恶化路径是:gc current request延迟升高 → 远程块获取变慢 → 本地会话排队等块 → 触发gc buffer busy acquire → 更多会话卡住 → LMS负载反向飙升。
- 执行
oradebug -g all hanganalyze 3,重点识别类似'gc current request'的链条 - 若发现大量Chain都指向同一对象(如
config_param表或idx_order_status索引),就别再调网络,直接切到热点块拆分 - 此时
gv$segment_statistics比AWR更快:SELECT owner, object_name, subobject_name, object_type, value FROM (SELECT owner, object_name, subobject_name, object_type, value FROM gv$segment_statistics WHERE statistic_name ='gc buffer busy' ORDER BY value DESC) WHERE ROWNUM
真正难处理的从来不是单点指标超标,而是三个关键维度(私网延迟、LMS CPU、GES队列)同时逼近临界值——这时任何单项优化都会被另一个瓶颈拖垮。必须同步采集、交叉验证、协同调整。











