![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
线上故障问题记录
文章平均质量分 71
有空的话,就记录开发过程中遇到的线上各种问题
我是冠超
开发是一门技术,也是一门艺术。
展开
-
记录一次线上logback日志打印中断问题,深入了解logback.xml
记录一次线上logback日志打印中断问题:背景:线上生产环境正在运行的一个微服务,运行一段时间之后,日志log突然消失。打印不出来最新的日志。系统正常运行,无异常。微服务也不收影响,无任何异常,针对这一问题,展开排查问题描述:微服务正常运行,各项指标均正常,请求无异常,日志监控平台采集不到最新日志。linux服务器logs指定日志目录下为空,历史log记录也没有。经过询问开发和运维同事,得知,我们自己有一套日志采集系统,服务器集成的ELK日志采集,业务服务系统,会把日志通过logback打印到外原创 2022-02-24 11:07:26 · 3411 阅读 · 0 评论 -
记录一次线上故障新生代,老年代,内存溢出,IO线程,CPU全部满负载异常情况排查
记录一次线上故障新生代,老年代,内存满负荷运行,IO线程,CPU全部满负载异常情况排查:背景:正常运行的一个某个业务系统,并发量比较大,相当于10万用户每5秒访问一次的数据量。因为某次发版之后,运行一段时间之后,通过监控,发现新生代内存,老年代内存都是99%的使用情况,单台实例服务IO线程达到600多,cpu使用率达到90%。GC垃圾回收时长大概比平常高出10倍以上排查思路:1.出现这样的情况,首先想到的是代码问题,不是环境配置,和服务器本身问题。但还是先检查了服务器和环境,最开始想到的是代码有fo原创 2022-02-23 14:53:41 · 561 阅读 · 0 评论