RAC的其中一个节点在一天内重启了三次,查看alert日志发现如下报错:2011-10-10 00:33:21.082
[cssd(7582)]CRS-1606:CSSD Insufficient voting files available [0 of 3]. Details in /u01/app/oracle/product/10.2.0/crs/log/database2/cssd/ocssd.log.
2011-10-10 01:24:21.945
[cssd(7586)]CRS-1605:CSSD voting file is online: /u02/ocr1/CSS. Details in /u01/app/oracle/product/10.2.0/crs/log/database2/cssd/ocssd.log.
2011-10-10 01:24:21.957
[cssd(7586)]CRS-1605:CSSD voting file is online: /u02/ocr3/CSS_mirror2. Details in /u01/app/oracle/product/10.2.0/crs/log/database2/cssd/ocssd.log.
2011-10-10 01:24:21.957
[cssd(7586)]CRS-1605:CSSD voting file is online: /u02/ocr2/CSS_mirror1. Details in /u01/app/oracle/product/10.2.0/crs/log/database2/cssd/ocssd.log.
2011-10-10 01:24:28.532
[cssd(7586)]CRS-1601:CSSD Reconfiguration complete. Active nodes are database1 database2 .
2011-10-10 01:24:31.933
[crsd(6388)]CRS-1012:The OCR service started on node database2.
2011-10-10 01:24:31.964
[evmd(7467)]CRS-1401:EVMD started on node database2.
2011-10-10 01:24:33.194
[crsd(6388)]CRS-1201:CRSD started on node database2.
2011-10-10 05:23:57.668
[cssd(7586)]CRS-1606:CSSD Insufficient voting files available [1 of 3]. Details in /u01/app/oracle/product/10.2.0/crs/log/database2/cssd/ocssd.log.
2011-10-10 06:15:05.420
[cssd(7593)]CRS-1605:CSSD voting file is online: /u02/ocr1/CSS. Details in /u01/app/oracle/product/10.2.0/crs/log/database2/cssd/ocssd.log.
2011-10-10 06:15:05.432
[cssd(7593)]CRS-1605:CSSD voting file is online: /u02/ocr2/CSS_mirror1. Details in /u01/app/oracle/product/10.2.0/crs/log/database2/cssd/ocssd.log.
2011-10-10 06:15:05.438
[cssd(7593)]CRS-1605:CSSD voting file is online: /u02/ocr3/CSS_mirror2. Details in /u01/app/oracle/product/10.2.0/crs/log/database2/cssd/ocssd.log.
2011-10-10 06:15:12.522
[cssd(7593)]CRS-1601:CSSD Reconfiguration complete. Active nodes are database1 database2 .
2011-10-10 06:15:15.898
[crsd(6389)]CRS-1012:The OCR service started on node database2.
2011-10-10 06:15:15.923
[evmd(7472)]CRS-1401:EVMD started on node database2.
2011-10-10 06:15:17.128
[crsd(6389)]CRS-1201:CRSD started on node database2.
2011-10-10 11:07:15.366
[cssd(7593)]CRS-1606:CSSD Insufficient voting files available [1 of 3]. Details in /u01/app/oracle/product/10.2.0/crs/log/database2/cssd/ocssd.log.
2011-10-10 11:57:17.398
[cssd(7579)]CRS-1605:CSSD voting file is online: /u02/ocr1/CSS. Details in /u01/app/oracle/product/10.2.0/crs/log/database2/cssd/ocssd.log.
2011-10-10 11:57:17.410
[cssd(7579)]CRS-1605:CSSD voting file is online: /u02/ocr2/CSS_mirror1. Details in /u01/app/oracle/product/10.2.0/crs/log/database2/cssd/ocssd.log.
2011-10-10 11:57:17.410
[cssd(7579)]CRS-1605:CSSD voting file is online: /u02/ocr3/CSS_mirror2. Details in /u01/app/oracle/product/10.2.0/crs/log/database2/cssd/ocssd.log.
2011-10-10 11:57:23.789
[cssd(7579)]CRS-1601:CSSD Reconfiguration complete. Active nodes are database1 database2 .
2011-10-10 11:57:27.198
[crsd(6378)]CRS-1012:The OCR service started on node database2.
2011-10-10 11:57:27.226
[evmd(7459)]CRS-1401:EVMD started on node database2.
2011-10-10 11:57:28.436
[crsd(6378)]CRS-1201:CRSD started on node database2.每次重启后,crs启动都是正常的。
查看操作系统/var/log/messages日志,发现如下报错:
Oct 10 00:39:29 database2 kernel: lpfc 0000:07:00.0: 0:0748 abort handler timed out waiting for abort to complete. Data: x0 x1 x0 x59bf57
Oct 10 00:42:13 database2 kernel: lpfc 0000:07:00.0: 0:0748 abort handler timed out waiting for abort to complete. Data: x0 x3 x0 x59bf09
Oct 10 00:46:29 database2 syslogd 1.4.1: restart.Oct 10 05:30:36 database2 kernel: lpfc 0000:07:00.0: 0:0748 abort handler timed out waiting for abort to complete. Data: x0 x3 x4 x55feb6
Oct 10 05:37:08 database2 syslogd 1.4.1: restart.Oct 10 11:14:21 database2 kernel: lpfc 0000:07:00.0: 0:0748 abort handler timed out waiting for abort to complete. Data: x0 x0 x1 x5baff8
Oct 10 11:20:33 database2 syslogd 1.4.1: restart.有谁遇到过这个问题,这是什么原因造成的?