早上连接生产库发现出现错误，数据库意外关闭了。

Alert和sqlplus中提示如下错误：

Errors in file /db/oracle10g/admin/benguo/bdump/benguo_dbw0_2029.trc:

ORA-01242: data file suffered media failure: database in NOARCHIVELOG mode

ORA-01114: IO error writing block to file 2 (block # 36874)

ORA-01110: data file 2: '/db/oracle10g/oradata/benguo/undotbs01.dbf'

ORA-27072: File I/O error

Linux-x86_64 Error: 5: Input/output error

其实根据最后的Linux-x86_64 Error: 5: Input/output error是os上的IO出现错误，根据前面的ora-01242中的media failure：database in NOARCHIVELOG mode很有可能是介质崩溃导致的实例启动后无法自动recover，而并不是crash导致的undo表空间问题。

查看os上的日志看看

[root@server24 ~]# dmesg|tail -n 100

…..

sd 0:0:1:0: SCSI error: return code = 0x08000002

sdb: Current: sense key: Medium Error

Add. Sense: Read retries exhausted

Info fld=0xcf74067

end_request: I/O error, dev sdb, sector 217530471

sdb: Current: sense key: Recovered Error

Add. Sense: Failure prediction threshold exceeded

sdb: Current: sense key: Recovered Error

Add. Sense: Failure prediction threshold exceeded

sdb: Current: sense key: Recovered Error

Add. Sense: Failure prediction threshold exceeded

Sdb盘的IO出现问题，也就是raid出现了问题，可能存在逻辑或者物理的扇区坏块。

通过badblocks –sv /dev/sdb并没有出现所谓的pass completed, 0 bad blocks found而是发现存在n多的坏块,由于没有明确的明确的起始块直接全盘检测。

尝试再次启动数据库到mount，然后做一个简单的recover然后数据库正常打开，但是由于此块磁盘存在坏块，如果是逻辑坏块直接fsck –a /dev/sdb，不过如果是物理坏块或者磁道损坏（0磁道损坏无法检测到硬盘），就需要尽快备份数据然后更换磁盘了，物理坏块是会传递的！