logback异步内存溢出导致程序卡死

最新推荐文章于 2023-11-12 16:59:23 发布
最新推荐文章于 2023-11-12 16:59:23 发布
阅读量4.9k 收藏 3
点赞数
分类专栏： java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_19457117/article/details/112451385
版权

logback异步日志需要一个Worker线程消费日志队列, 线程名称是AsyncAppender-Worker-(AppenderName)
在这里插入图片描述

在这里插入图片描述
当有大量请求进来, 日志打的也比较多, 而且单行日志很长, 程序运行一段时间后失去响应, 查看线程栈发现都卡在了写入队列的地方

在这里插入图片描述
只剩下了一个debug的Appender, info的Appender没有了导致所有的http线程都卡死在写队列
在这里插入图片描述

QMCoder
关注
  • 0
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
专栏目录
springboot日志框架logback异步输出配置
03-11
目前所有的日志记录方式采用的都是同步的方式，即直接将日志写入文件。每次日志输出到文件都会进行一次磁盘IO，在多应用的时候这种效果会导致一定的线程运行延迟，所以可以采用异步的方式处理。 采用异步写日志的方式，通过不让主线程去写日志文件而减少磁盘IO，避免并发下造成线程阻塞，从而减少不必要的性能损耗。
logback-kafka-appender:适用于Apache Kafka的Logback附加程序
05-06
该追加程序使您的应用程序可以将其应用程序日志直接发布到Apache Kafka。 登录不兼容警告 由于Logback Encoder API中的重大更改，您至少需要使用logback 1.2版。 完整配置示例 将logback-kafka-appender和logback-...
logback 多线程 死锁
abc123maxiaolong的专栏
05-12 2239
logback 多线程下频繁的写日志会出现死锁，可以使用异步appender避免这个问题： <!-- 异步写日志，用户简介专用日志 --> <appender name="ASYNC_USER_PROFILE_MODEL" class="ch.qos.logback.classic.AsyncAppender"> <File>${LO...
Java中OutOfMemoryError(内存溢出)的三种情况及解决办法
在梅边的专栏
05-28 3104
转载自：http://blog.sina.com.cn/s/blog_701c951f0100n1sp.html  相信有一定java开发经验的人或多或少都会遇到OutOfMemoryError的问题，这个问题曾困扰了我很长时间，随着解决各类问题经验的积累以及对问题根源的探索，终于有了一个比较深入的认识。 在解决java内存溢出问题之前，需要对jvm（java虚拟机）的内存管理有一定的认识。j
SpringBootTest 引起的logback溢出
DAX的个人博客
08-03 378
at ch.qos.logback.classic.spi.ThrowableProxy.(ThrowableProxy.java:79)异常
内存优化--LOGBACK导致内存告警
qq_33199919的博客
02-10 4863
一.故事背景 由于开辟新市场需要，开发了新的项部署在海外平台，其中最消耗内存的功能是消费kafka消息（最开始预计一天有1千万的量），部署完之后运行一段时间发现出现内存告警问题。 二.分析问题 出现内存告警，（新项目是低配置机器 2C4G * 2台）第一个念头是去查看堆空间设置的情况，看到jvm启动命令中堆空间都是直接指定大小，说明问题不是出在堆空间 -Xmx3g -Xms3g 先不管这些，去查看总的内存使用情况，发现总的内存空间使用将近有92% = 3.68G,那么这多出来使用的0.6
内存溢出和内存泄漏
weixin_30243533的博客
10-29 73
参考https://www.cnblogs.com/Sharley/p/5285045.html 内存溢出和内存泄漏的区别、产生原因以及解决方案 内存溢出 out of memory，是指程序在申请内存时，没有足够的内存空间供其使用，出现out of memory；比如申请了一个integer,但给它存了long才能存下的数，那就是内存溢出。 内存泄露 memor...
问题排查之--logback配置不合理（多线程尽量避免输出日志到控制台，无论什么情况下）
leandzgc的专栏
12-17 5994
背景 最近小伙伴反馈执行导出效率较慢，现象是升级2.5.5之前速度还好，一小时可以导2万左右的案件，但是升级2.5.5之后导出效率下降了好几倍，现场导出了gc和agent日志，但还是未定位根因。 本来我感觉这不是啥大问题，以我对导出工具的了解，给现场调调参就搞定的事儿，没想到很快就打脸了！！！ 过程 根据个人既往经验尝试定位问题 导出工具调优第一件事儿是先看fb_runlog.log（良好...
Spring Boot异步输出Logback日志方法详解
08-25
【Spring Boot异步输出Logback日志方法详解】 在Spring Boot中，日志记录是一个重要的功能，用于跟踪应用程序的行为和调试问题。Logback是广泛使用的日志框架，由log4j的创始人Ceki Gülcü设计，提供了高效、灵活...
Java日志框架：logback详解
02-24
大约从16年中到现在，不管是我参与的别人已经搭建好的项目还是我自己主导的项目，日志框架基本都换成了logback，总结一下，logback大约有以下的一些优点：内核重写、测试充分、初始化内存加载更小，这一切让logback...
logback下载 日志文件jar包
12-11
这个压缩包包含了实现 Logback 功能所需的几个关键组件，以及一个配置文件，使得用户能够方便地管理和记录应用程序的日志信息。 1. **logback-core-1.2.3.jar**： 这是 Logback 的核心库，包含了日志记录的基本...
记一次内存溢出查找的问题
故意养只喵叫顺儿的博客
11-13 512
情景：今天测试环境发现应用出现内存溢出的问题。这是从来没有出现过的问题，在关闭此次版本新上线的功能后仍发现Perm区的内存持续在增长。 jdk版本：1.7 环境：linux ====================================================== 起因：测试环境出现内存溢出 排查过程： 1，重现此内存溢出问题 查看应用日志，定位到哪一个操作导致内存溢出...
java中的nath.sqrt_java - 将GC日志与Logback集成 - 堆栈内存溢出
weixin_39640414的博客
02-27 308
我想将GC日志与我自己的基于http的Logger集成在一起，以避免基于文件的日志记录。 从JDk 7开始，我们可以在GC事件上添加我们自己的侦听器，该侦听器运行良好。 但是我希望我的gc日志的打印方式与之前的记录方式相同。像下面。2019-11-04T10:12:33.754+0000: 3.199: [GC pause (G1 Evacuation Pause) (young)Desir...
WebServer异步日志模块，Log类构析导致线程死锁解决分析
Tracker647的博客
09-30 310
1
更换日志实现时报栈内存溢出
绅士jiejie的博客
02-20 640
原来项目是用日志门面slf4j+log4j日志实现，现在日志实现要换成logback，但是原来的日志代码太多了，不可能一个个的去修改，所以引入了slf4j与log4j相关的日志桥接器依赖来兼容老代码，然后在启动项目时就报了栈内存溢出的错误。 解决方法 栈内存溢出的原因是因为产生了无限循环，解决方法是去掉slf4j与log4j相关的适配器依赖。 ...
Java日志框架(logback, log4j2)等引发的悲剧，应用死活起不来
Odboy
10-18 369
场景回放 线上代码与开发环境代码一致 线上jdk版本与开发环境一致，jdk8 线上tomcat版本与开发环境一致，tomcat8 尝试解决 重启tomcat 更换tomcat，启动tomcat 重启vm 总结 多次验证下来几近奔溃，然后突然想到去年logback依赖引发的一个悲剧，然后就到webapps下项目的WEB-INF/lib下找找有没有类似"slf4j-log4...
logback异步日志打印阻塞工作线程
最新发布
fenglllle的博客
11-12 2261
实际上这个问题是使用问题，非常简单，不过越是简单的使用，却可能出现致命问题，一般公司都会统一脚手架或者统一规范的方式来实现标准的日志配置文件，防止错误配置导致业务问题，不知道未来Java虚拟线程大规模使用会不会缓解日志打印阻塞工作线程的问题，毕竟调度更优，不过如果线程池满载，虚拟线程也是无能为力。还是需要在丢日志和存储消费日志的能力作取舍。
logback自定义kafkaAppender， 日志循环输出导致代码死锁
HeiheiChihiro的博客
10-03 520
自定义同步kafkaAppender时，发生springboot启动死锁，排查及解决
换种思路解决日志占用磁盘空间问题
weixin_30652879的博客
02-06 101
最近生产环境有个设备磁盘空间达到97%以上。 通过排查发现logstash产生的nohup.out文件有20Gb。 该日志是生产上一个重要的kafka消息消费程序，程序不能停止。而使用删除命令 rm -rf nohup,out 删除日志肯定不起作用，日志被logstash程序占用。 通过使用 lsof |grep -i delete 发现日志果然被logst...
logback 异步输出
05-26
Logback 支持异步输出日志，可以提高程序的性能。 在 Logback 中，异步输出主要通过 AsyncAppender 实现。AsyncAppender 是一个装饰器模式的 Appender，它可以将同步的 Appender 转换为异步的 Appender。 使用 AsyncAppender 时，需要指定一个 BlockingQueue 用于缓存日志事件，以及一个 Executor 用于执行日志事件。日志事件会被添加到 BlockingQueue 中，然后由 Executor 异步地处理。 以下是一个使用 AsyncAppender 的配置示例： ```xml <configuration> <appender name="CONSOLE" class="ch.qos.logback.core.ConsoleAppender"> <encoder> <pattern>%d{yyyy-MM-dd HH:mm:ss.SSS} [%thread] %-5level %logger{36} - %msg%n</pattern> </encoder> </appender> <appender name="ASYNC_CONSOLE" class="ch.qos.logback.classic.AsyncAppender"> <appender-ref ref="CONSOLE" /> <queueSize>512</queueSize> <discardingThreshold>0</discardingThreshold> <includeCallerData>false</includeCallerData> </appender> <root level="debug"> <appender-ref ref="ASYNC_CONSOLE" /> </root> </configuration> ``` 在上面的配置中，我们首先定义了一个 ConsoleAppender，然后定义了一个 AsyncAppender（ASYNC_CONSOLE），并将 ConsoleAppender 作为它的子节点。我们还设置了 queueSize 和 discardingThreshold 参数，这两个参数用于控制当缓存队列已满时如何处理新的日志事件。 最后，我们将 AsyncAppender（ASYNC_CONSOLE）设置为 root logger 的 Appender。 通过这样的配置，我们就可以在 Logback 中实现异步输出日志了。
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值