logback日志导致的性能问题

最新推荐文章于 2024-05-19 18:51:10 发布
VIP文章 最新推荐文章于 2024-05-19 18:51:10 发布
阅读量3.3k 收藏 7
点赞数 1
文章标签： java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_38536878/article/details/123821072
版权

菜鸟第一次写博客，只为自己平时遇到的问题做个记录，如有不对之处请指正！

项目场景：

现场发现有个程序执行一段时间之后会出现响应超时的问题，日志看似乎是程序出现了莫名的停顿。

问题描述

折腾了很久之后决定看看堆栈信息。通过在出现问题时执行jstack得到了堆栈信息：
在这里插入图片描述
在这里插入图片描述
可以看到有1005个线程在等待0x00000006e7e680e0对象，只有一个线程拥有该对象。

原因分析：

通过阅读logback框架的源码发现，这里的写日志操作是加锁的，所以造成了性能瓶颈。在这里插入图片描述

<

最低0.47元/天 解锁文章
qq_38536878
关注
  • 1
    点赞
  • 踩
  • 7
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
logback 使用regex匹配进行日志脱敏
qq_33025651的博客
04-28 726
我们使用正则表达式替换敏感数据，正则表达式中有5个组，例如： /* * {phoneNumber=(+358)0393289092389}, * then: * (Group #1) (Group #2) (Group #3) (Group #4) (Group #5) * { phoneNumber= (+358)0393289092389
Logback配置文件这么写，TPS提高10倍
oschina_40914891的博客
08-13 638
通过阅读本篇文章将了解到 1.日志输出到文件并根据LEVEL级别将日志分类保存到不同文件 2.通过异步输出日志减少磁盘IO提高性能 3.异步输出日志的原理 配置文件logback-spring.xml SpringBoot工程自带logback和slf4j的依赖，所以重点放在编写配置文件上，需要引入什么依赖，日志依赖冲突统统都不需要我们管了。logback框架会默认...
Logback日志系统文件
03-01
分享的文件包括Logback的相关jar包和核心配置文件。 Logback是由log4j创始人设计的另一个开源日志组件，基于slf4j的日志规范实现的框架,性能比log4j要好。 Logback主要分为三个技术模块： logback-core：该模块为其他两个模块奠定了基础。 logback-classic：是log4j的一个改良版本，同时它完整实现了slf4j API。 logback-access 模块与 Tomcat 和 Jetty 等 Servlet 容器集成，以提供 HTTP 访问日志功能。
java的Logback日志框架jar包
07-11
适用于java中的Logback日志框架
基于 log4j2 插件实现统一日志脱敏，性能远超正则替换
06-05 1072
经过了这两篇文章之后，我们对日志脱敏应该有了一定的理解。但是实际项目中，我们遇到的情况往往更加复杂：1）项目的 java bean 定义不规范，大量接口使用 map。2）历史项目众多，改造成本巨大。种种原因，导致使用注解的方式耗费大量的时间。但是一般给我们改造的时间是有限的。那么，有没有一种方法可以统一对敏感信息进行脱敏处理呢？答案是有的，我们可以基于 log4j2 实现自己的脱敏策略，统一实现日志的脱敏。
高并发系统谨防被一行日志击垮
mxt51220的博客
11-10 892
这就意味着同一个appender的日志写是串行的，在高并发的场景下因为有锁的争用现象，所以看似很简单的一行日志，耗费的时间却不少。接下来我们在本地简单的模拟一下高并发的场景，并记录打一行日志的耗时是多少需要说明的是，现实中高并发的请求应当用一个线程池向另一个线程池反复提交任务来模拟，这里我们简化了这个过程。
Logback日志配置和简单使用
weixin_42728895的博客
06-03 965
logback加载顺序 我们简单分析一下logback加载过程，当我们使用logback-classic.jar时，应用启动，那么logback会按照如下顺序进行扫描： 在classpath下寻找是否有logback.groovy（即logback支持groovy与xml两种配置方式） 在classpath下寻找是否有logback-test.xml 在classpath下寻找是否有logback.xml 以上任何一项找到了，就不进行后续扫描 当所有以上四项都找不到的情况下，logback会构造一个Cons
logback性能优化详解
弹指天下
06-06 3939
不正确的日志打印不但会降低程序运行性能，还会占用大量IO资源和硬盘存储空间。本文主要总结一些能提高日志打印性能的手段。
记一次线上logback日志打印导致应用响应慢的分析报告
cs_fang_dn的专栏
03-26 1748
如果说耗时在数据库查询中，那么在监控平台也会看到sql的慢查询，但在监控平台并没有发现sql慢查询，也联系dba帮忙监控一下数据库的链接数、慢查询语句等，但最终结果也是返回数据库都正常。在日志平台elk中，通过搜索某个耗时高（找了一个耗时60s左右）的接口，并通过此接口的traceId将整个接口的调用链日志搜索出来，发现整个traceId的日志打印超过了500行，也会发现某几行日志打印时间间隔会超过4s。接口耗时3s，时间减半！再查看具体代码写法，居然上了一把锁，终于找到这把锁了，这把锁是公平锁。
logback异步日志打印阻塞工作线程
fenglllle的博客
11-12 1648
实际上这个问题是使用问题，非常简单，不过越是简单的使用，却可能出现致命问题，一般公司都会统一脚手架或者统一规范的方式来实现标准的日志配置文件，防止错误配置导致业务问题，不知道未来Java虚拟线程大规模使用会不会缓解日志打印阻塞工作线程的问题，毕竟调度更优，不过如果线程池满载，虚拟线程也是无能为力。还是需要在丢日志和存储消费日志的能力作取舍。
SpringBoot Logback日志记录到数据库的实现方法
08-25
主要介绍了SpringBoot Logback日志记录到数据库的实现方法，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
logback日志的jar包和配置介绍
08-17
logback日志的jar包和配置介绍：logback-classic-1.1.2.jar、logback-core-1.1.2.jar、slf4j-api-1.7.7.jar、logback.xml、rsframework.properties
springboot配置logback日志管理过程详解
08-25
主要介绍了springboot配置logback日志管理过程详解,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
Springboot异常日志输出
dxdxdx11的博客
10-26 2650
一 lombok插件使用： 引入依赖,在项目中使用Lombok可以减少很多重复代码的书写。比如说getter/setter/toString等方法的编写 ↓ <!--lombok用来简化实体类--> <dependency> <groupId>org.projectlombok</groupId> <artifactId>lombok</artifactId> <version>1.16.20&lt
logback property 默认值_一般人不敢动系列之—基于logback的日志“规范”和“脱敏”
weixin_39605191的博客
11-23 574
原创：小姐姐味道（微信公众号ID：xjjdog），欢迎分享，转载请保留出处。在日常开发中，我们经常会使用logback打印日志，还会包含一些敏感内容。比如手机号、卡号、邮箱等，这对数据安全而言是有风险的。但是如果让业务去处理这些问题，则需要在每个打印日志的地方，进行重复的脱敏操作，不仅繁琐影响代码风格，还会有遗漏情况。这个时候，我们就需要考虑一个相对统一的解决方案，通过增强logback，在日志m...
SpringBoot【logback 日志脱敏】
liso00的博客
06-21 1604
logback 日志脱敏
使用logback对系统产生的日志文件进行脱敏处理
qq_42077566的博客
09-08 3887
业务场景 开发中，对于打印出来的日志文件，涉及到敏感信息，类似银行卡，姓名，身份证等等，通常会根据需求进行关键词的隐藏，比如姓名：万旭会处理后在日志中显示：姓名：万*。这样的过程叫做日志关键词脱敏。 如下使用logback进行脱敏操作和配置。 配置枚举类 用来管理需要脱敏的关键词 public enum KeywordTypeEnum { /** * 真实姓名 */ TRUE_NAME("trueName","真实姓名"), /** * 身份证号码
logback日志配置详解
jcc4261的博客
03-23 2649
这里对 logback 的日志配置文件做了一下总结。logback 整体的运行机制是非常复杂而庞大的，这里只对 配置文件的一些节点，做简单的介绍，希望能对大家 ，有所帮助！
docker中安装jenkins，并在node和cloud上跑通基于源码控制SCM的pipeline
最新发布
qq_29022265的博客
05-19 1159
从安装jenkins到创建jenkins的node和cloud，最后再将scm和FreeStyle两种流水线跑通。
logback 日志归档
03-27
在使用logback进行日志记录时，可以通过配置实现日志的归档，以便于管理和查看。以下是一个示例配置： ``` <appender name="FILE" class="ch.qos.logback.core.rolling.RollingFileAppender"> <file>logs/myapp.log</file> <rollingPolicy class="ch.qos.logback.core.rolling.TimeBasedRollingPolicy"> <fileNamePattern>logs/myapp.%d{yyyy-MM-dd}.%i.log</fileNamePattern> <maxHistory>30</maxHistory> </rollingPolicy> <encoder> <pattern>%d{yyyy-MM-dd HH:mm:ss.SSS} [%thread] %-5level %logger{36} - %msg%n</pattern> </encoder> </appender> ``` 上述配置中，使用了`RollingFileAppender`作为日志输出的方式，`TimeBasedRollingPolicy`作为日志归档的策略。具体说明如下： - `fileNamePattern`指定了归档后的文件名格式，其中`%d{yyyy-MM-dd}`表示按日期归档，`%i`表示归档文件的序号，可以避免同一天内多次归档时文件名重复的问题。 - `maxHistory`指定了保留的历史文件个数，超过该个数后会自动删除最旧的文件。 通过上述配置，日志会按照日期进行归档，并保留最近30天的历史文件。归档后的文件名类似于`myapp.2021-05-01.0.log`、`myapp.2021-05-02.0.log`等。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值