vs调试无法读取内存_接入网故障处理宝典:主控盘内存泄漏导致无法获取读取类操作案例...

本文描述了一次OLT(光线路终端)出现的内存泄漏问题,导致网管无法进行读取操作。经过排查,排除了UNM2000网管故障和网络问题,最终通过命令行工具确认为主控盘内存泄漏。通过主备倒换恢复了正常,后续将进一步调查内存泄漏原因并采取措施修复。
摘要由CSDN通过智能技术生成
6a8befd6367120efff671c0756cc5aa4.png fdcca754cb0d34f03991d0b519866ae6.png

★★★

6dd7c3a72bb7f00aa0d7dc4a787e1ed6.png

OLT、内存泄露

ddfb1d1365c9138c139e1f1e8961279a.png

某地市运营商装机人员反馈网管上读取未授权ONU操作超时,可以telnet到此OLT,但是网管上所有读取类的操作全部显示执行中或等待超时,此故障并未影响到用户业务。

7693b8e107e5faedcb5e0b0a0bba36c4.png 7bbc36e43b7e757fbdfeba61fccc54f9.png e86a43ac3c74d2ce2faf39d89780b126.png 5f5dd271009faa0eebe8a554228bda0d.png
  • UNM2000网管问题;

  • OLT设备到网管的网络问题;

  • OLT设备问题。

e75c7c262fe85265fcc6ce682420e83c.png

1. 查看服务器上UNM2000网管的相关服务。

e6b87d68579688b652423cdd60019f7e.png

结果:6个UNM服务与Apache Tomcat 6服务正常,ICE服务正常。

结论:排除UNM2000网管故障问题。

2. 将OLT网元IP、掩码、网关记录好后,删除网元,重新添加OLT网元。

2e5fbc214da82408c5d8e2d0cfca171b.png

结果:发现无法检测到物理配置,但是可以telnet到OLT,长ping OLT设备IP不丢包。

结论:排除OLT设备到网管的网络问题。

3. 使用show log命令查看日志。

结果:未发现异常日志。

结论:需要继续排查问题。

4. 使用show time命令查看此OLT已经运行400多天,在服务器上查看此OLT的配置文件。

deb534cfe77677da1cbe9979c87a1666.png

结果:发现配置文件保存时间异常(正常情况每日自动保存一次)。

结论:判断故障发生日期可能在配置文件保存时间异常期间。

5. 到现场,通过CRT方式或串口方式导出配置文件。

结果:导出配置文件提示失败。

结论:怀疑可能是主控盘内存泄漏导致故障。

6. Telnet登录到OLT,输入lll命令进入Debug目录。

  • 在Debug目录输入dangerous_shell进入shell模式,在shell模式下输入memShow命令查看内存。

0d1041a204e0b268afd7ff0a531a3a46.png
  • 在Debug目录输入set malloc_debug enable命令打开内存监控,输入show malloc_debug detail命令查看主控盘内存情况。

a9a8104c45f061225f5db41cbcd5920d.png

结果:持续观察memShow状态两小时,发现当前内存在减少,同时age一直在增加。

结论:确认为主控盘内存泄漏。

1ee97770d3044da0e79a7f8266af2642.png

对此OLT进行主备倒换,发现可以检测到物理配置,并恢复网管读取类的操作,同时观察上联口流量与pon-mac地址均正常,网管配置没有丢失。持续观察发现此OLT配置文件每天自动保存,网管读取类的操作也正常,再未发生过此类故障。后续查明内存泄露原因后,进行相应工程版本及补丁升级工作。

68cf15ad165e6a7d98a54aca722b7812.png

MemShow命令下bytes参数在不断减少,show malloc_debug detail命令下age参数一直增加,可以说明内存泄露。

ac78ee8c72c40d1c198537b2f9a8cfe8.png 00c325dfc6a4c4b49898fa3f6d2e15a2.gif
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值