oracle rac实例无法打开,绝大多数是底层资源未就绪:优先查crs资源状态和asm磁盘组挂载情况,90%问题源于asm未挂载、ocr/voting disk不可访问、私网不通或ipc残留。

Oracle RAC实例无法打开,绝大多数情况不是数据库本身坏了,而是它依赖的底层资源没就位——尤其是ASM磁盘组没挂上、OCR/voting disk不可访问,或者共享内存段残留卡住了启动流程。直接startup只会反复报ORA-01565、ORA-17503或ORA-01034,必须逐层验证。
先确认是“没启动”还是“启动了但没open”
很多人一看到ORA-01034就以为实例完全没起来,其实可能是已启动但卡在mount阶段。关键看进程和状态:
-
ps -ef | grep pmon:如果ora_pmon_<sid></sid>存在,说明实例进程已拉起,只是没open;若不存在,才是根本没启动成功 -
sqlplus / as sysdba连上后执行select status from v$instance;:返回MOUNTED说明控制文件已读取但没open;返回STARTED说明卡在nomount(参数文件或控制文件路径/权限有问题) - RAC环境下别只查本节点,用
crsctl stat res -t看ora.<db_name>.db</db_name>资源状态,但注意它可能显示ONLINE而实际是INTERMEDIATE——这表示实例启动失败但CRS还没放弃重试
检查ASM磁盘组是否真正mounted
实例无法open的最常见原因,是存放控制文件、数据文件的磁盘组(比如DATA、RECO)处于DISMOUNTED状态。别信crsctl输出,要进ASM实例查真实状态:
- 切到
grid用户,运行sqlplus / as sysasm,执行select name, state from v$asm_diskgroup; - 若输出为空或全是
DISMOUNTED,立刻停掉所有数据库启动动作——先解决ASM层 - 对每个关键磁盘组手动尝试挂载:
alter diskgroup DATA mount;,如果报ORA-15032或ORA-15040,说明磁盘头损坏或权限不一致;如果报ORA-15001,说明ASM根本没发现对应磁盘设备 - 验证磁盘可见性:
asmcmd lsdsk无输出?加-k参数重试:asmcmd lsdsk -k,暴露内核路径差异(比如节点1看到/dev/mapper/DATA01,节点2看到/dev/sdb)
排查OCR/voting disk不可访问导致CSSD卡死
即使ASM磁盘组能挂上,如果OCR或voting disk路径不可达,ora.cssd服务会卡在启动中,进而阻塞整个实例启动链。现象是crsctl start crs执行后长时间无响应,日志里反复出现IPC Send timeout或Cannot communicate with Cluster Ready Services:
- 查OCR位置:
cat /etc/oracle/olr.loc确认路径指向正确,且该文件存在;再运行ocrcheck看是否能读取 - 查voting disk状态:
crsctl query css votedisk,输出路径必须在所有节点上真实存在、属主为root:oinstall、权限为644;如果是ASM磁盘组,确保该组已mount且v$asm_diskgroup.state = 'MOUNTED' - 检查CSSD日志:
/u01/app/11.2/grid/log/<hostname>/cssd/ocssd.log</hostname>,重点搜ERROR和timeout,常暴露私网不通、UDP 12345端口被防火墙拦截等问题 - 节点间网络连通性验证:
olsnodes -n应列出所有节点编号;ping -I <private_interface><other_node_private_ip></other_node_private_ip></private_interface>确认私网直连;nc -u <other_node_private_ip> 12345</other_node_private_ip>测试端口可达性
清理残留IPC资源避免ORA-27154类错误
Oracle 11g RAC异常终止后,常遗留System V共享内存段(shm)和信号量(sem),导致新实例启动时因key冲突或空间不足失败,报ORA-27154、ORA-27300等。这不是配置问题,是OS级资源泄漏:
- 先确认无运行中实例:
ps -ef | grep pmon应无输出;再用ipcs -m和ipcs -s分别查看内存段和信号量,筛选owner为oracle且无对应进程的残留项 - 清理顺序必须严格:先停CRS(
crsctl stop crs以root执行),再清理IPC资源;否则CRS重启时可能分配失败 - 安全清理命令:
ipcs -m | awk '$5 == "oracle" {print $2}' | xargs -I {} ipcrm -m {}(内存段);同理处理信号量:ipcs -s | awk '$5 == "oracle" {print $2}' | xargs -I {} ipcrm -s {} - 清理后务必
ipcs -m -s确认输出为空;再检查/etc/sysctl.conf中kernel.shmmax和kernel.shmall是否≥实例SGA大小,且sysctl -p已生效
真正卡住RAC实例打开的,往往不是数据库参数或SQL逻辑,而是ASM磁盘组状态、OCR/voting disk可访问性、私网通信质量、IPC资源残留这四层中的某一层出了问题。每层都要用对应工具直接验证,而不是靠日志推测——比如crsctl stat res -t显示online,不代表ASM真能读磁盘;lsnrctl status显示监听正常,也不代表实例已open。跳过任何一层验证,都可能把问题拖长数小时。











