sqlplus登录报错TNS-12547: TNS:lost contact

         夜里12点接到一线电话说数据库登录报错，登录不了就连忙起来登录一线环境sqlplus "/as sydba"登录报错TNS-12547: TNS:lost contact

首先获取alert日志listener日志，alert日志大量报错，报job的相关进程不能创建，listener日志报如下错误：

13-2月 -2014 00:33:03 * (CONNECT_DATA=(SERVER=DEDICATED)(SERVICE_NAME=dbo1)(CID=(PROGRAM=sqlplus)(HOST=hostname)(USER=oracle))) * (ADDRESS=(PROTOCOL=tcp)(HOST=12.34.93.22)(PORT=56158)) * establish * mdsp * 12518
TNS-12518: TNS:listener could not hand off client connection
 TNS-12547: TNS:lost contact
  TNS-12560: TNS:protocol adapter error
   TNS-00517: Lost contact
    IBM/AIX RISC System/6000 Error: 32: Broken pipe

针对这个问题，查询了很多资料，都解决不了，最后一招让oracle切换到备机上运行，但一线环境不是说随便切换的

最后发现一线操作人员，在修改裸设备权限时误把/dev目录的权限修改了，让一线人员把/dev目录权限改回去，sqlplus登录正常问题解决

一线修改权限 chmod 660 /dev/ rlv_undo 在/dev和rlv_undo中间多了一个空格，导致了把dev 目录的权限改了，由此可见一线操作要慎重

这个问题定位了将近2个小时，最后就准备了双机切换了