资产系统数据库问题分析

客户资产系统本月20号到今天陆续发生使用过程<wbr></wbr>中无法连接数据库群集服务节点的问题。发现问题时weblogic<wbr></wbr>群集服务正常,远程登陆到数据库使用sqlplus无法连接群集中<wbr></wbr>的某一个(不是特定的一个)。
以下是客户DBA总结的问题情况
时间 <script><!-- D(["mb","/u003cfont size/u003d/"2/"/>问题类型/u003c/font/>/u003c/td/>/n /u003ctd style/u003d/"border-right:windowtext 0.5pt solid;border-top:windowtext 0.5pt solid;border-left:windowtext;width:161pt;border-bottom:windowtext 0.5pt solid;background-color:transparent/" width/u003d/"215/"/>/u003cfont size/u003d/"2/"/>问题描述/u003c/font/>/u003c/td/>/n /u003ctd style/u003d/"border-right:windowtext 0.5pt solid;border-top:windowtext 0.5pt solid;border-left:windowtext;width:126pt;border-bottom:windowtext 0.5pt solid;background-color:transparent/" width/u003d/"168/"/>/u003cfont size/u003d/"2/"/>产生原因/u003c/font/>/u003c/td/>/n /u003ctd style/u003d/"border-right:windowtext 0.5pt solid;border-top:windowtext 0.5pt solid;border-left:windowtext;width:143pt;border-bottom:windowtext 0.5pt solid;background-color:transparent/" width/u003d/"190/"/>/u003cfont size/u003d/"2/"/>解决方案/u003c/font/>/u003c/td/>/u003c/tr/>/n /u003ctr height/u003d/"60/"/>/n /u003ctd style/u003d/"border-right:windowtext 0.5pt solid;border-top:windowtext;border-left:windowtext 0.5pt solid;width:101pt;border-bottom:windowtext 0.5pt solid;background-color:transparent/" width/u003d/"135/" height/u003d/"60/"/>/u003cfont size/u003d/"2/"/>11.22-26/u003c/font/>/u003c/td/>/n /u003ctd style/u003d/"border-right:windowtext 0.5pt solid;border-top:windowtext;border-left:windowtext;width:97pt;border-bottom:windowtext 0.5pt solid;background-color:transparent/" width/u003d/"129/"/>/u003cfont size/u003d/"2/"/>数据库服务问题/u003c/font/>/u003c/td/>/n /u003ctd style/u003d/"border-right:windowtext 0.5pt solid;border-top:windowtext;border-left:windowtext;width:161pt;border-bottom:windowtext 0.5pt solid;background-color:transparent/" width/u003d/"215/"/>/u003cfont size/u003d/"2/"/>正常使用资产系统过程中,出现无法登陆系统,无法直接连接数据库/u003cWBR/>,几分钟之内自动恢复/u003c/font/>/u003c/td/>/n /u003ctd style/u003d/"border-right:windowtext 0.5pt solid;border-top:windowtext;border-left:windowtext;width:126pt;border-bottom:windowtext 0.5pt solid;background-color:transparent/" width/u003d/"168/"/>/u003cfont size/u003d/"2/"/>数据库连接出错,可能是网络或数据库服务本身的原因引起的服务器传/u003cWBR/>输中断/u003c/font/>/u003c/td/>/n /u003ctd style/u003d/"border-right:windowtext 0.5pt solid;border-top:windowtext;border-left:windowtext;width:143pt;border-bottom:windowtext 0.5pt solid;background-color:transparent/" width/u003d/"190/"/>/u003cbr/>/u003cfont size/u003d/"2/"/>下次再发生类似情况时,ssh到服务器,看是否可本地登录数据库/u003cWBR/>,以确定Oracle服务本身是正常的。/u003c/font/>/u003c/td/>/u003c/tr/>/n /u003ctr height/u003d/"93/"/>/n /u003ctd style/u003d/"border-right:windowtext 0.5pt solid;border-top:windowtext;border-left:windowtext 0.5pt solid;width:101pt;border-bottom:windowtext 0.5pt solid;background-color:transparent/" width/u003d/"135/" height/u003d/"93/"/>",1] ); //--></script>问题类型 问题描述产生原因解决方案
11.22-26数据库服务问题正常使用资产系统过程中,出现无法登陆系统,无法直接连接数据库<wbr></wbr>,几分钟之内自动恢复数据库连接出错,可能是网络或数据库服务本身的原因引起的服务器传<wbr></wbr>输中断
下次再发生类似情况时,ssh到服务器,看是否可本地登录数据库<wbr></wbr>,以确定Oracle服务本身是正常的。
<script><!-- D(["mb","/u003cfont size/u003d/"2/"/>11.26 14:35/u003c/font/>/u003c/td/>/n /u003ctd style/u003d/"border-right:windowtext 0.5pt solid;border-top:windowtext;border-left:windowtext;width:97pt;border-bottom:windowtext 0.5pt solid;background-color:transparent/" width/u003d/"129/"/>/u003cfont size/u003d/"2/"/>数据库服务问题/u003c/font/>/u003c/td/>/n /u003ctd style/u003d/"border-right:windowtext 0.5pt solid;border-top:windowtext;border-left:windowtext;width:161pt;border-bottom:windowtext 0.5pt solid;background-color:transparent/" width/u003d/"215/"/>/u003cfont size/u003d/"2/"/>在客户端手动安装数据库汇总程序时,中途断开与数据库连接,只能直连至10.232.1.81的群集数据库节点,数据库服务未见异常,资产系统仍能使用/u003c/font/>/u003c/td/>/n /u003ctd style/u003d/"border-right:windowtext 0.5pt solid;border-top:windowtext;border-left:windowtext;width:126pt;border-bottom:windowtext 0.5pt solid;background-color:transparent/" width/u003d/"168/"/>/u003cfont size/u003d/"2/"/>不明原因产生的数据库节点无法连接/u003c/font/>/u003c/td/>/n /u003ctd style/u003d/"border-right:windowtext 0.5pt solid;border-top:windowtext;border-left:windowtext;width:143pt;border-bottom:windowtext 0.5pt solid;background-color:transparent/" width/u003d/"190/"/>/u003cfont size/u003d/"2/"/>重启有问题的数据库服务,针对具体原因作数据库调整。/u003c/font/>/u003c/td/>/u003c/tr/>/n /u003ctr height/u003d/"80/"/>/n /u003ctd style/u003d/"border-right:windowtext 0.5pt solid;border-top:windowtext;border-left:windowtext 0.5pt solid;width:101pt;border-bottom:windowtext 0.5pt solid;background-color:transparent/" width/u003d/"135/" height/u003d/"80/"/>/u003cfont size/u003d/"2/"/>11.27 上午/u003c/font/>/u003c/td/>/n /u003ctd style/u003d/"border-right:windowtext 0.5pt solid;border-top:windowtext;border-left:windowtext;width:97pt;border-bottom:windowtext 0.5pt solid;background-color:transparent/" width/u003d/"129/"/>/u003cfont size/u003d/"2/"/>数据库服务问题/u003c/font/>/u003c/td/>/n /u003ctd style/u003d/"border-right:windowtext 0.5pt solid;border-top:windowtext;border-left:windowtext;width:161pt;border-bottom:windowtext 0.5pt solid;background-color:transparent/" width/u003d/"215/"/>/u003cfont size/u003d/"2/"/>使用资产系统时,出现无法直连1.81数据库节点,节点1.80正常,数据库服务未见异常,资产系统能正常使用/u003c/font/>/u003c/td/>/n /u003ctd style/u003d/"border-right:windowtext 0.5pt solid;border-top:windowtext;border-left:windowtext;width:126pt;border-bottom:windowtext 0.5pt solid;background-color:transparent/" width/u003d/"168/"/>/u003cfont size/u003d/"2/"/>不明原因产生的数据库节点无法连接/u003c/font/>/u003c/td/>/n /u003ctd style/u003d/"border-right:windowtext 0.5pt solid;border-top:windowtext;border-left:windowtext;width:143pt;border-bottom:windowtext 0.5pt solid;background-color:transparent/" width/u003d/"190/"/>",1] ); //--></script>11.26 14:35 数据库服务问题在客户端手动安装数据库汇总程序时,中途断开与数据库连接,只能直连至10.232.1.81的群集数据库节点,数据库服务未见异常,资产系统仍能使用不明原因产生的数据库节点无法连接重启有问题的数据库服务,针对具体原因作数据库调整。
11.27 上午数据库服务问题使用资产系统时,出现无法直连1.81数据库节点,节点1.80正常,数据库服务未见异常,资产系统能正常使用不明原因产生的数据库节点无法连接 <script><!-- D(["mb","/u003cfont size/u003d/"2/"/>重启数据库两个节点的实例/u003c/font/>/u003c/td/>/u003c/tr/>/n /u003ctr height/u003d/"85/"/>/n /u003ctd style/u003d/"border-right:windowtext 0.5pt solid;border-top:windowtext;border-left:windowtext 0.5pt solid;width:101pt;border-bottom:windowtext 0.5pt solid;background-color:transparent/" width/u003d/"135/" height/u003d/"85/"/>/u003cfont size/u003d/"2/"/>11.30 8:20/u003c/font/>/u003c/td/>/n /u003ctd style/u003d/"border-right:windowtext 0.5pt solid;border-top:windowtext;border-left:windowtext;width:97pt;border-bottom:windowtext 0.5pt solid;background-color:transparent/" width/u003d/"129/"/>/u003cfont size/u003d/"2/"/>数据库服务问题/u003c/font/>/u003c/td/>/n /u003ctd style/u003d/"border-right:windowtext 0.5pt solid;border-top:windowtext;border-left:windowtext;width:161pt;border-bottom:windowtext 0.5pt solid;background-color:transparent/" width/u003d/"215/"/>/u003cfont size/u003d/"2/"/>正常使用过程中,出现无法登陆资产系统,sqlplus无法直接连接数据库1.80节点,报ORA-00018:超出最大会话数,节点不能自动恢复正常/u003c/font/>/u003c/td/>/n /u003ctd style/u003d/"border-right:windowtext 0.5pt solid;border-top:windowtext;border-left:windowtext;width:126pt;border-bottom:windowtext 0.5pt solid;background-color:transparent/" width/u003d/"168/"/>/u003cfont size/u003d/"2/"/>不明原因产生的数据库节点无法连接/u003c/font/>/u003c/td/>/n /u003ctd style/u003d/"border-right:windowtext 0.5pt solid;border-top:windowtext;border-left:windowtext;width:143pt;border-bottom:windowtext 0.5pt solid;background-color:transparent/" width/u003d/"190/"/>/u003cfont size/u003d/"2/"/>重启数据库两个节点的实例/u003c/font/>/u003c/td/>/u003c/tr/>/u003c/tbody/>/u003c/colgroup/>/u003c/table/>/u003c/div/>/n/u003cdiv/>/u003c/div/>/n/u003cdiv/>/u003c/div/>/n/u003cdiv/>此问题持续发生影响到系统使用,具体原因尚不清楚/u003cWBR/>,还请你们帮忙分析一下,附件是应用服务端的日志及数据库aler/u003cWBR/>t,trace日志。/u003c/div/>/n/u003cdiv/>/u003c/div/>/n/u003cdiv/>/u003c/div/>/n/u003cdiv/>/u003c/div/>/n/u003cdiv/>----------------------------/u003c/div/>/n/u003cdiv/>广东远光软件股份有限公司 /u003cbr/>湖南项目组 /u003cbr/>E-mail:/u003ca title/u003d/"mailto:zhangfan@ygsoft.com/" href/u003d/"mailto:zhangfan@ygsoft.com/" target/u003d/"_blank/" onclick/u003d/"return top.js.OpenExtLink(window,event,this)/"/>zhangfan@ygsoft.com/u003c/a/>/u003cbr/>张帆/u003c/div/>/u003c/font/>/u003c/div/>/u003c/div/>/n",0] ); //--></script>重启数据库两个节点的实例
11.30 8:20数据库服务问题正常使用过程中,出现无法登陆资产系统,sqlplus无法直接连接数据库1.80节点,报ORA-00018:超出最大会话数,节点不能自动恢复正常不明原因产生的数据库节点无法连接重启数据库两个节点的实例
此问题持续发生影响到系统使用,具体原因尚不清楚<wbr></wbr>,附件是应用服务端的日志及数据库aler<wbr></wbr>t,trace日志。(此处略)
问题回复:
问题1:在1126_14点35-----alert_eamdb1.log中出现下列错误信息
Mon Nov 26 14:40:58 2007
WARNING: inbound connection timed out (ORA-3136)
Mon Nov 26 14:40:58 2007
WARNING: inbound connection timed out (ORA-3136)
Mon Nov 26 14:40:58 2007
WARNING: inbound connection timed out (ORA-3136)
Mon Nov 26 14:40:58 2007
WARNING: inbound connection timed out (ORA-3136)
Mon Nov 26 14:40:58 2007
WARNING: inbound connection timed out (ORA-3136)
Mon Nov 26 14:40:58 2007
WARNING: inbound connection timed out (ORA-3136)
Mon Nov 26 14:40:58 2007
WARNING: inbound connection timed out (ORA-3136)
Mon Nov 26 14:40:58 2007
WARNING: inbound connection timed out (ORA-3136)
Mon Nov 26 14:40:58 2007
WARNING: inbound connection timed out (ORA-3136)
回复:这是 Oracle 一个内部错误( bug )。
解决方法:
1. listener.ora 中添加 INBOUND_CONNECT_TIMEOUT_instance_name=0
2. 在服务器上的 sqlnet.ora 文件中添加 SQLNET.INBOUND_CONNECT_TIMEOUT=0
3. 重新装入侦听服务 lsnrctl reload
问题2:在1126_14点35-----alert_eamdb1.log中出现下列错误信息
Mon Nov 26 14:43:33 2007
Errors in file /opt/app/oracle/admin/eamdb/bdump/eamdb1_lmon_1039.trc:
ORA-29702: error occurred in Cluster Group Service operation
LMON: terminating instance due to error 29702
Mon Nov 26 14:43:33 2007
Errors in file /opt/app/oracle/admin/eamdb/bdump/eamdb1_lms0_1043.trc:
ORA-29702: error occurred in Cluster Group Service operation
Mon Nov 26 14:43:33 2007
Errors in file /opt/app/oracle/admin/eamdb/bdump/eamdb1_lms2_1051.trc:
ORA-29702: error occurred in Cluster Group Service operation
回复:这是 Linux 引起的错误, Linux 系统可能重设了 /etc/hosts 文件引起的通讯问题。
解决方法:
确保在 /etc/hosts 文件的回送地址中不包含节点名( zcdb1 zcdb2 )。如果机器名出现在回送地址条目中,如下所示:
127.0.0.1 zcdb1 localhost.localdomain localhost
需要将其如下删除:
127.0.0.1 localhost.localdomain localhost
问题1:在30号8点20-----alert_eamdb1.log中出现下列错误信息
Fri Nov 30 03:12:13 2007
Errors in file /opt/app/oracle/admin/eamdb/bdump/eamdb1_reco_27875.trc:
ORA-00604: error occurred at recursive SQL level 1
ORA-00018: maximum number of sessions exceeded
回复:该问题和应用相关,查询相应的 processes sessions open_cursors 设置,根据情况再作进一步处理。
SQL> show parameter processes
SQL> show parameter sessions
SQL> show parameter open_cursors
SQL> select count(*) from v$process;
SQL> select count(*) from v$session;
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值