crsctl check ctss显示observer mode即表明CTSS已放弃时间控制权,转为旁观外部服务,若chronyd配置不当或未收敛,将导致节点时钟漂移加剧,最终触发CSSD检测到clock skew而驱逐节点。

crsctl check ctss 显示 observer mode 就是驱逐前兆
Oracle RAC 不靠 date 命令或日志时间戳判断同步状态,而是由 CTSS(Cluster Time Synchronization Service)进程实时监控。一旦 crsctl check ctss 返回 CTSS is in observer mode,说明 CTSS 已主动放弃控制权——它不再选举参考节点、不拉齐 offset、不干预系统时钟,转而“旁观”外部服务(如 chronyd)。但问题在于:chronyd 若配置不当或未收敛,CTSS 的 observer 状态就等于集群失去了统一时间契约。后续所有依赖时间一致性的机制都会连锁失效,节点驱逐只是时间问题。
chronyd 配置漏掉 makestep 或 rtcsync 会引发跳变式校时
chronyd 默认不会在运行中大幅修正时间,但若配置缺失关键项,就会触发危险的阶跃(jump)行为:
-
makestep 1.0 3缺失 → 开机后超 1 秒偏差仍会跳变,而非 slewing 渐进拉齐 -
rtcsync缺失 → 重启后硬件时钟未更新,系统时间可能倒退数分钟 -
iburst缺失 → 初始同步慢,offset 长期 >500ms,CTSS 拒绝切回 active
这些跳变直接被 CSSD 进程捕获为 clock skew exceeds tolerance,触发 CRS-1611(75% 心跳丢失)告警,进入驱逐倒计时。
防火墙拦截 UDP 123 或 chronyd 进程残留导致同步假成功
表面看 chronyc tracking 显示 offset 很小,但实际并未真正生效:
- 防火墙未放开 UDP 端口 123:
firewall-cmd --list-ports查不到123/udp,chronyd 只能靠本地 drift 补偿,无法校准绝对时间 - 残留
chronyd进程或/var/run/chronyd.pid文件 →systemctl restart chronyd实际未真正重启,旧配置仍在跑 -
/etc/chrony.conf存在但内容为空 → Oracle 仍判定 NTP 启用,强制 CTSS 保持 observer
此时各节点 offset 看似稳定,实则漂移方向和速率不同,几小时后差值轻松突破 1s,ocssd.log 中 CRS-1610 和 CRS-1607 就会密集出现。
单节点 chronyd 启动失败却未影响其他节点,反而加速驱逐
RAC 对时间一致性要求是“全有或全无”。哪怕只有 1 个节点的 chronyd 因配置错误(如服务器地址写错、DNS 解析失败)未能连接 NTP 源,该节点的 offset 就会持续发散。而 CTSS 在 observer 模式下不跨节点协调,只信任本地 chronyd 输出 —— 导致该节点时间越走越偏,CSSD 收不到它发出的合法心跳包,很快标记为 failed to communicate with reference node,最终执行 node X evicted。更麻烦的是,驱逐发生后,被踢出节点上的 chronyd 日志可能已被轮转,排查时容易误判为“当时一切正常”。











