Exdatacell节点配置时遇到的一个问题

问题描述： [celladmin@vrh4 ~]$ cellcli CellCLI：版本 11.2.3.2.0 - 于 2014 年 6 月 14 日星期六 09:11:08 EDT 发布 版权所有 (c) 2007, 2012，Oracle。版权所有。电池效率比：1 CellCLI 创建所有 celldisk CELL-02559：有 i

问题描述：

[celladmin@vrh4 ~]$ cellcli
CellCLI：版本 11.2.3.2.0 - 于 2014 年美国东部时间 6 月 14 日星期六 09:11:08 发布

版权所有 (c) 2007、2012，Oracle。保留所有权利。
电池效率比：1

CellCLI>全部创建 celldisk

CELL-02559：MS 和 CELLSRV 之间存在通信错误。

CellCLI>全部更改单元重新启动服务

停止 RS、CELLSRV 和 MS 服务...
服务关闭成功。
启动 RS、CELLSRV 和 MS 服务...
获取 RS 服务的状态...正在运行
正在启动 CELLSRV 服务...
CELLSRV 服务启动不成功。
CELL-01547：由于未知原因，CELLSRV 启动失败。
开始 MS 服务...
MS服务启动成功。

CellCLI>

rs，ms 服务起来了，但 cellsrv 服务都起不来

问题处理：

警报日志：

CELLSRV 进程 id=3403
CELLSRV 单元主机名=vrh4.oracle.com
CELLSRV 版本=11.2.3.2.0，标签=OSS_11.2.3.2.0_LINUX.X64_120713，Fri_Jul_13_12:37:13_PDT_2012
操作系统大页状态：
可用的总/空闲大页=32/32；大页面大小=2048KB
操作系统统计数据：物理内存：497 MB。核心数：1
CELLSRV 配置参数：
版本=0.0
Cellsrv 最大内存未设置。总物理内存：497 MB 小于所需的最小值：3891 MB。
celldisk 策略配置从 /opt/oracle/cell11.2.3.2.0_LINUX.X64_120713/cellsrv/deploy/config/cdpolicy.dat 读取，版本

不。 1 和 pol 编号。 0
汽车在线功能1.3
CellServer MD5 二进制校验和：cf96327cbbec459c6ac80deaec94d5cd
2014 年 6 月 14 日星期六 09:12:00
[RS] 启动服务 MS，pid 3258
操作系统大页状态：
可用的总/免费大页=39/39；大页面大小=2048KB
警告：系统可用的大页面少于所需的数量。
缓存分配：Num 1MB 大页缓冲区：78 Num 1MB 非大页缓冲区：822
MS_ALERT 大页警告 78 822
ossmmap_map：Mmap 内存 len 的 mmap 失败：1624010752 errno：12 --------------------mmap 无法映射内存
系统上的物理内存可能较低。 ---------------------------这里报错信息很明确，物理内存不够啊
2014 年 6 月 14 日星期六 09:12:05
文件 /opt/oracle/cell11.2.3.2.0_LINUX.X64_120713/log/diag/asm/cell/vrh4/trace/svtrc_3403_0.trc 中的错误（事件=65）：
ORA-00600: 内部错误代码，参数：[缓存：map_failed]、[]、[]、[]、[]、[]、[]、[]、[]、[]、[]、[]
事件详情：

/opt/oracle/cell11.2.3.2.0_LINUX.X64_120713/log/diag/asm/cell/vrh4/incident/incdir_65/svtrc_3403_0_i65.trc
扫一扫[inc][65]：已完成
CELLSRV 错误 - ORA-600 内部错误
2014 年 6 月 14 日星期六 09:12:16
[RS] 监控进程 /opt/oracle/cell11.2.3.2.0_LINUX.X64_120713/cellsrv/bin/cellrsomt (pid: 0) 返回错误：126
[RS] 服务 CELLSRV 的监控进程检测到大量重启。禁用监控进程。
文件 /opt/oracle/cell11.2.3.2.0_LINUX.X64_120713/log/diag/asm/cell/vrh4/trace/rstrc_3248_4.trc 中的错误（事件=73）：
RS-7445 [CELLSRV 监视器已禁用] [检测到大量重启] [] [] [] [] [] [] [] [] [] []
事件详情：

/opt/oracle/cell11.2.3.2.0_LINUX.X64_120713/log/diag/asm/cell/vrh4/incident/incdir_73/rstrc_3248_4_i73.trc
扫一扫[inc][73]：已完成

继续查看其他信息：

[root@vrh4 trace]# more /opt/oracle/cell11.2.3.2.0_LINUX.X64_120713/log/diag/asm/cell/vrh4/trace/svtrc_3403_0.trc
跟踪文件 /opt/oracle/cell11.2.3.2.0_LINUX.X64_120713/log/diag/asm/cell/vrh4/trace/svtrc_3403_0.trc
ORACLE_HOME = /opt/oracle/cell11.2.3.2.0_LINUX.X64_120713
系统名称：Linux
节点名称：vrh4.oracle.com
发布：2.6.18-274.el5
版本：#1 SMP 2011 年 7 月 25 日星期一 13:17:49 EDT
机器：x86_64
CELL 软件版本：OSS_11.2.3.2.0_LINUX.X64_120713

*** 2014-06-14 09:11:53.184
CellDisk 策略配置：
1 #version_ossp_cdperf_policy
0 #uniq_pol_num_ossp_cdperf_policy
2 #hang_hd_ossp_cdperf_policy
2 #hang_fd_ossp_cdperf_policy
2 #slow_abs_hd_ossp_cdperf_policy
2 #slow_abs_fd_ossp_cdperf_policy
2 #slow_rltv_hd_ossp_cdperf_policy
2 #slow_rltv_fd_ossp_cdperf_policy
2 #slow_lat_hd_ossp_cdperf_policy
2 #slow_lat_fd_ossp_cdperf_policy
0 #ioerr_hd_ossp_cdperf_policy
2 #ioerr_fd_ossp_cdperf_policy
0 #powercycle_hang_ossp_cdperf_policy
0 #powercycle_hang_wtfc_ossp_cdperf_policy
6 #lat_freq_ossp_cdperf_policy
50 #asm_offline_freq_ossp_cdperf_policy
30 #dmwg_avgrqsize_tolr_ossp_cdperf_policy
30 #dmwg_avgnumreads_tolr_ossp_cdperf_policy
30 #dmwg_avgnumwrites_tolr_ossp_cdperf_policy
100 #dmwg_avgrqsize_min_ossp_cdperf_policy
8 #dmwg_avgrqsizefl_min_ossp_cdperf_policy
10 #dmwg_avgnumreads_min_ossp_cdperf_policy
10 #dmwg_avgnumwrites_min_ossp_cdperf_policy
3 #dmwg_lownumreads_ossp_cdperf_policy
3 #dmwg_lownumwrites_ossp_cdperf_policy
30 #dmwg_lowlatreads_ossp_cdperf_policy
30 #dmwg_lowlatwrites_ossp_cdperf_policy
1 #dmwg_avgqdepreads_min_ossp_cdperf_policy
5 #dmwg_avgqdepreadsfl_min_ossp_cdperf_policy
1 #dmwg_avgqdepwrites_min_ossp_cdperf_policy
5 #dmwg_avgqdepwritesfl_min_ossp_cdperf_policy
100 #dmwg_avgqdepreads_tolr_ossp_cdperf_policy
100 #dmwg_avgqdepwrites_tolr_ossp_cdperf_policy
100 #dmwg_avgqszreads_tolr_ossp_cdperf_policy
100 #dmwg_avgqszwrites_tolr_ossp_cdperf_policy
60 #dmwg_same_pct_ossp_cdperf_policy
3 #conf_hd_max_num_ossp_cdperf_policy
8 #conf_fd_max_num_ossp_cdperf_policy
3 #proa_fail_hd_max_num_ossp_cdperf_policy
8 #proa_fail_fd_max_num_ossp_cdperf_policy
2 #hung_hd_max_num_reboot_ossp_cdperf_policy
9 #hung_fd_max_num_reboot_ossp_cdperf_policy
3 #numtriggers_thld_5hrs_ossp_cdperf_policy
4 #numtriggers_thld_day_ossp_cdperf_policy
5 #numtriggers_thld_week_ossp_cdperf_policy
7 #numtriggers_thld_month_ossp_cdperf_policy
8 #numtriggers_thld_quart_ossp_cdperf_policy
6 #ioerr_numthld_near_ossp_cdperf_policy
10 #ioerr_numnzero_near_ossp_cdperf_policy
20 #ioerr_numthld_far_ossp_cdperf_policy
50 #ioerr_numnzero_far_ossp_cdperf_policy
50 #err_lat_timeout_ossp_cdperf_policy
6 #err_lat_numthld_near_ossp_cdperf_policy
10 #err_lat_numnzero_near_ossp_cdperf_policy
20 #err_lat_numthld_far_ossp_cdperf_policy
50 #err_lat_numnzero_far_ossp_cdperf_policy
90000 95000 100 6 10 20 50 10000 300 200 7 10 30 50 20000 500 200 500 200 14 20 14 20 24 40 24 40

#dmg_params_ossp_cdperf_policy[0]
90000 95000 200 6 10 20 50 30000 300 200 7 10 30 50 60000 500 200 500 200 14 20 14 20 24 40 24 40

#dmg_params_ossp_cdperf_policy[1]
90000 95000 150 6 10 20 50 24000 300 200 7 10 30 50 48000 500 200 500 200 14 20 14 20 24 40 24 40

#dmg_params_ossp_cdperf_policy[2]
90000 95000 100 6 10 20 50 15000 300 200 7 10 30 50 30000 500 200 500 200 14 20 14 10 24 40 24 40

#dmg_params_ossp_cdperf_policy[3]
90000 95000 100 6 10 20 50 6000 300 200 7 10 30 50 12000 500 200 500 200 14 20 14 10 24 40 24 40

#dmg_params_ossp_cdperf_policy[4]
90000 95000 200 6 10 20 50 15000 300 200 25 40 30 50 20000 2000 1500 2000 1500 20 30 20 30 25 40 25 40

#dmg_params_ossp_cdperf_policy[5]
90000 95000 300 6 10 20 50 40000 300 200 25 40 30 50 80000 2000 1500 2000 1500 20 30 20 30 25 40 25 40

#dmg_params_ossp_cdperf_policy[6]
90000 95000 250 6 10 20 50 30000 300 200 25 40 30 50 60000 2000 1500 2000 1500 20 30 20 30 25 40 25 40

#dmg_params_ossp_cdperf_policy[7]
90000 95000 200 6 10 20 50 25000 300 200 25 40 30 50 40000 2000 1500 2000 1500 20 30 20 30 25 40 25 40

#dmg_params_ossp_cdperf_policy[8]
90000 95000 200 6 10 20 50 10000 300 200 25 40 30 50 20000 2000 1500 2000 1500 20 30 20 30 25 40 25 40

#dmg_params_ossp_cdperf_policy[9]
90000 95000 50 6 10 20 50 2000 300 200 20 30 30 50 4000 500 200 500 200 14 20 14 20 24 40 24 40

#dmg_params_ossp_cdperf_policy[10]
90000 95000 25 6 10 20 50 1000 300 200 7 10 30 50 2000 500 200 500 200 14 20 14 20 24 40 24 40

#dmg_params_ossp_cdperf_policy[11]
90000 95000 50 6 10 20 50 2000 300 200 7 10 30 50 4000 500 200 500 200 14 20 14 20 24 40 24 40

#dmg_params_ossp_cdperf_policy[12]
90000 95000 50 6 10 20 50 2000 300 200 7 10 30 50 4000 500 200 500 200 14 20 14 20 24 40 24 40

#dmg_params_ossp_cdperf_policy[13]
400000 410000 3000 6 10 20 50 50000 1000 800 7 10 30 50 100000 2000 2000 2000 2000 20 30 20 30 25 40 25 40

#dmg_params_ossp_cdperf_policy[14]
42346 #checksum_ossp_cdperf_policy
LockPool名称：存储索引锁池类型：RWLOCK POOL组：35 numLocks：1024 nextLockIndex：0totalLockRefs：0

lockArray:0x2accba272660
2014-06-14 09:11:53.898190*: 打开文件

/opt/oracle/cell11.2.3.2.0_LINUX.X64_120713/cellsrv/deploy/config/griddisk.owners.dat，版本 11.2.2.4.0，描述符 14
2014-06-14 09:12:01.801656*：CELLSRV 需要 463 个大页，但只有 32 个可用。 2014-06-14 09:12:01.838968*: ----------------------这里的报错已经非常明晰了

CELLSRV 尝试保留 431 个以上的大页。
2014-06-14 09:12:02.021569*: 成功为 buffersWriting 消息类型分配 78MB 的大页

OSS_PIPE_ERR_FAILED_STARTUP_RESTART 到 OSS->RS 管道
DDE：防洪未激活
已创建事件 65，转储文件：

/opt/oracle/cell11.2.3.2.0_LINUX.X64_120713/log/diag/asm/cell/vrh4/incident/incdir_65/svtrc_3403_0_i65.trc
ORA-00600: 内部错误代码，参数：[缓存：map_failed]、[]、[]、[]、[]、[]、[]、[]、[]、[]、[]、[]

2014-06-14 09:12:15.281868*: CELLSRV 错误 - ORA-600 内部错误

看来细胞节点要加大内存才能解决问题啊