【案例58】WebSphere输出日志输出慢导致线程被阻塞

于 2024-08-26 17:23:23 发布
阅读量729 收藏 2
点赞数 25
分类专栏： NC\NCC 文章标签： linux WebSphere 服务器 java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zfr629/article/details/141569107
版权

问题现象

系统非常卡顿

问题分析

分析javacore文件，寻找关键字，Flat locked by

3LKMONOBJECT       org/apache/logging/log4j/core/appender/OutputStreamManager@0x000000060FB6B3C0: Flat locked by "WebContainer : 3" (J9VMThread:0x0000000007C55A00), entry count 1
3LKWAITERQ            Waiting to enter:
3LKWAITER                "WorkManager.MulticastWM : 19" (J9VMThread:0x000000000380D000)
3LKWAITER                "WebContainer : 8" (J9VMThread:0x0000000007EF2000)
3LKWAITER                "WebContainer : 10" (J9VMThread:0x0000000008B53E00)
3LKWAITER                "WorkManager.MulticastWM : 49" (J9VMThread:0x00000000089A7600)
3LKWAITER                "WebContainer : 16" (J9VMThread:0x0000000008EB8D00)

3号线程阻塞8、10、16、19号线程，发现相关线程，查看3号线程具体信息，非NCC代码原因造成。

3XMTHREADBLOCK     Blocked on: org/apache/logging/log4j/core/appender/OutputStreamManager@0x000000060FB6B3C0 Owned by: "WebContainer : 3" (J9VMThread:0x0000000007C55A00, java/lang/Thread:0x00000006152DF108)
3XMHEAPALLOC             Heap bytes allocated since last GC cycle=24576 (0x6000)
3XMTHREADINFO3           Java callstack:
4XESTACKTRACE                at org/apache/logging/log4j/core/appender/OutputStreamManager.writeBytes(OutputStreamManager.java:352(Compiled Code))
4XESTACKTRACE                at org/apache/logging/log4j/core/layout/TextEncoderHelper.writeEncodedText(TextEncoderHelper.java:96(Compiled Code))
4XESTACKTRACE                at org/apache/logging/log4j/core/layout/TextEncoderHelper.encodeText(TextEncoderHelper.java:65(Compiled Code))
4XESTACKTRACE                at org/apache/logging/log4j/core/layout/StringBuilderEncoder.encode(StringBuilderEncoder.java:68(Compiled Code))
4XESTACKTRACE                at org/apache/logging/log4j/core/layout/StringBuilderEncoder.encode(StringBuilderEncoder.java:32(Compiled Code))
4XESTACKTRACE                at org/apache/logging/log4j/core/layout/PatternLayout.encode(PatternLayout.java:228(Compiled Code))
4XESTACKTRACE                at org/apache/logging/log4j/core/layout/PatternLayout.encode(PatternLayout.java:60(Compiled Code))
4XESTACKTRACE                at org/apache/logging/log4j/core/appender/AbstractOutputStreamAppender.directEncodeEvent(AbstractOutputStreamAppender.java:197(Compiled Code))
4XESTACKTRACE                at org/apache/logging/log4j/core/appender/AbstractOutputStreamAppender.tryAppend(AbstractOutputStreamAppender.java:190(Compiled Code))
4XESTACKTRACE                at org/apache/logging/log4j/core/appender/AbstractOutputStreamAppender.append(AbstractOutputStreamAppender.java:181(Compiled Code))
4XESTACKTRACE                at org/apache/logging/log4j/core/config/AppenderControl.tryCallAppender(AppenderControl.java:161(Compiled Code))
4XESTACKTRACE                at org/apache/logging/log4j/core/config/AppenderControl.callAppender0(AppenderControl.java:134(Compiled Code))
4XESTACKTRACE                at org/apache/logging/log4j/core/config/AppenderControl.callAppenderPreventRecursion(AppenderControl.java:125(Compiled Code))
4XESTACKTRACE                at org/apache/logging/log4j/core/config/AppenderControl.callAppender(AppenderControl.java:89(Compiled Code))
4XESTACKTRACE                at org/apache/logging/log4j/core/config/LoggerConfig.callAppenders(LoggerConfig.java:542(Compiled Code))
4XESTACKTRACE                at org/apache/logging/log4j/core/config/LoggerConfig.processLogEvent(LoggerConfig.java:500(Compiled Code))
4XESTACKTRACE                at org/apache/logging/log4j/core/config/LoggerConfig.log(LoggerConfig.java:483(Compiled Code))
4XESTACKTRACE                at org/apache/logging/log4j/core/config/LoggerConfig.log(LoggerConfig.java:417(Compiled Code))
4XESTACKTRACE                at org/apache/logging/log4j/core/config/AwaitCompletionReliabilityStrategy.log(AwaitCompletionReliabilityStrategy.java:82(Compiled Code))
4XESTACKTRACE                at org/apache/logging/log4j/core/Logger.log(Logger.java:161(Compiled Code))
4XESTACKTRACE                at org/apache/logging/log4j/spi/AbstractLogger.tryLogMessage(AbstractLogger.java:2205(Compiled Code))
4XESTACKTRACE                at org/apache/logging/log4j/spi/AbstractLogger.logMessageTrackRecursion(AbstractLogger.java:2159(Compiled Code))
4XESTACKTRACE                at org/apache/logging/log4j/spi/AbstractLogger.logMessageSafely(AbstractLogger.java:2142(Compiled Code))
4XESTACKTRACE                at org/apache/logging/log4j/spi/AbstractLogger.logMessage(AbstractLogger.java:1994(Compiled Code))
4XESTACKTRACE                at org/apache/logging/log4j/spi/AbstractLogger.logIfEnabled(AbstractLogger.java:1852(Compiled Code))
4XESTACKTRACE                at nc/bs/logging/impl/log4j2/Log4j2LoggerPlugin.log(Log4j2LoggerPlugin.java:103(Compiled Code))
4XESTACKTRACE                at nc/bs/logging/impl/log4j2/Log4j2LoggerPlugin.log(Log4j2LoggerPlugin.java:119(Compiled Code))
4XESTACKTRACE                at nc/bs/logging/Logger.debug(Logger.java:182(Compiled Code))
4XESTACKTRACE                at nc/bs/framework/rmi/server/RMIHandlerImpl$1.run(RMIHandlerImpl.java:80(Compiled Code))
4XESTACKTRACE                at java/util/concurrent/Executors$RunnableAdapter.call(Executors.java:522(Compiled Code))
4XESTACKTRACE                at java/util/concurrent/FutureTask.runAndReset(FutureTask.java:319(Compiled Code))
4XESTACKTRACE                at java/util/concurrent/ScheduledThreadPoolExecutor$ScheduledFutureTask.access$301(ScheduledThreadPoolExecutor.java:191(Compiled Code))
4XESTACKTRACE                at java/util/concurrent/ScheduledThreadPoolExecutor$ScheduledFutureTask.run(ScheduledThreadPoolExecutor.java:305(Compiled Code))
4XESTACKTRACE                at java/util/concurrent/ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1160(Compiled Code))
4XESTACKTRACE                at java/util/concurrent/ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:635)
4XESTACKTRACE                at nc/bs/framework/execute/server/SecureRunnable.run(SecureRunnable.java:46)
4XESTACKTRACE                at org/granite/commonj/CommonjWork.run(CommonjWork.java:31)
4XESTACKTRACE                at com/ibm/ws/asynchbeans/J2EEContext.run(J2EEContext.java:1046)
4XESTACKTRACE                at com/ibm/ws/asynchbeans/WorkWithExecutionContextImpl.go(WorkWithExecutionContextImpl.java:199)
4XESTACKTRACE                at com/ibm/ws/asynchbeans/CJWorkItemImpl.run(CJWorkItemImpl.java:237)
4XESTACKTRACE                at com/ibm/ws/util/ThreadPool$Worker.run(ThreadPool.java:1909(Compiled Code))

org/apache/logging/log4j/core/appender/OutputStreamManager日志输出慢导致线程被阻塞，解决办法，加大was SystemOut.log 日志大小

解决方案

调整WebSphere的SystemOut.log日志大小。日常如果想要多保留相关日志信息，也可以在这里调整。（下图为个人测试环境，仅供参考）

进到WebSphere控制台，IP:9060/admin，进到【故障诊断节点】选择【日志和跟踪】，选择需要调整的具体server（每个server都需改。）

选择JVM日志

 调整文件大小和个数

保存后重启整个was集群即可。

Z.Virgil
关注
专栏目录
Jetpack架构组件库：WorkManager
川峰的博客
01-28 1111
工作使用Worker类定义。Worker类的doWork()方法在提供的后台线程上异步运行。如需为创建一些要运行的工作，请继承Worker类并重写doWork()方法。从doWork()返回的Result会通知服务工作是否成功，以及工作失败时是否应重试工作。：工作成功完成。：工作失败。：工作失败，应根据其重试政策在其他时间尝试。默认情况下，当您的应用启动时，WorkManager 使用适合大多数应用的合理选项自动进行配置。
WorkManager 的使用
github_36818902的博客
03-13 780
背景使用WorkManager 1。介绍 Android上有许多选项可用于延迟后台工作。此代码库涵盖了WorkManager，这是一个兼容，灵活且简单的库，用于可延迟的后台工作。WorkManager目前处于alpha状态 - 稳定后，它将成为Android上推荐的任务调度程序。 什么是WorkManager WorkManager是Android Jetpack的一部分，是后台工作...
2020网络安全投融资趋势报告
最新发布
securitypaper的博客
01-05 4651
本文是学习2020网络安全投融资趋势报告. 下载地址 http://github5.com/view/55012而整理的学习笔记,分享出来希望更多人受益,如果存在侵权请及时联系我们在应用安全领域，本文共收录投融资事件13起，其中国内6起，国外7起。融资并购金额为27.413亿美元。表10：物联网安全领域融资并购情况与2019年相比，本文收录到的2020年物联网领域投融资事件，无论是在融资总金额还是总数量上都有明显提升。 需要注意的是，随着5G、IPv6的普及，物联网设备将会呈几何倍数的增长。与此同时，无论是
WorkManager的学习和使用要点笔记
qq_34332698的博客
02-21 1448
1.在oppo Android 5.1手机上报错Invoke-customs are only supported starting with Android O 解决办法：在app的build.gradle中添加 android{ compileOptions { sourceCompatibility JavaVersion.VERSION_1_8 targetCompatibility JavaVersion.VERSION_1_8 } } 2.Wor
Android窗口管理服务WindowManagerService对窗口的组织方式分析
weixin_30788619的博客
01-21 320
我们知道，在Android系统中，Activity是以堆栈的形式组织在ActivityManagerService服务中的。与Activity类似，Android系统中的窗口也是以堆栈的形式组织在WindowManagerService服务中的，其中，Z轴位置较低的窗口位于Z轴位置较高的窗口的下面。在本文中，我们就详细分析WindowManagerService服务是如何以堆栈...
我的Java开发学习之旅------>Java经典面试题
字节卷动
03-07 1万+
从享受生活的角度上来说：“程序员并不是一种最好的职业，我认为两种人可以做程序员，第一，你不做程序员，你就没有什么工作可做，或者说是即使有可以做的工作但是你非常不愿意去做；第二，你非常痴迷和爱好程序，并且在这方面有一些天赋和优势。程序员的结局也是有两种：第一，默默退休，第二以程序员为起点或跳板，注意积累，跟对了好的老板或团队，找到和很好的搭档自己创业，成为IT金领和富翁。” 人们在时间面前是平等的
一些面试题
博客
03-01 2850
1、一个".java"源文件中是否可以包括多个类（不是内部类）？有什么限制？  可以有多个类，但只能有一个public的类，并且public的类名必须与文件名相一致。 2、Java有没有goto?  java中的保留字，现在没有在java中使用。   3、说说&和&&的区别。  &和&&都可以用作逻辑与的运算符，表示逻辑与（and），当运算符两边的表达式的结果都为true时，整个运算结
Java面试宝典
mzhhy的博客
09-21 3155
1. Java基础部分... 4 1、一个".java"源文件中是否可以包括多个类（不是内部类）？有什么限制？... 4 2、Java有没有goto?. 4 3、说说&和&&的区别。... 4 4、在JAVA中如何跳出当前的多重嵌套循环？... 4 5、switch语句能否作用在byte上，能否作用在long上，能否作用在String上?. 5 6、shorts1 = 1;
java面试题
weixin_49277956的博客
09-05 7213
Java考试题 一：单选题 下列哪一种叙述是正确的（D ） A． abstract修饰符可修饰字段、方法和类 B． 抽象方法的body部分必须用一对大括号{ }包住 C． 声明抽象方法，大括号可有可无 D． 声明抽象方法不可写出大括号 如下代码 public class Test { public int aMethod() { static int i = 0; i++; return i; } public static void main (String args[]) { Test test
Tomcat架构详解
悦分享
09-06 830
所谓虚拟机，就是一台虚拟的计算机。他是一款软件，用来执行一系列虚拟计算机指令。大体上，虚拟机可以分为系统虚拟机和程序虚拟机。大名鼎鼎的VisualBox、VMware就属于系统虚拟机。他们完全是对物理计算机的仿真。提供了一个可以运行完整操作系统的软件平台。程序虚拟机的典型代表就是Java虚拟机，它专门为执行单个计算机程序而设计，在Java虚拟机中执行的指令我们称为Java字节码指令。无论是系统虚拟机还是程序虚拟机，在上面运行的软件都呗限制于虚拟机提供的资源中。JAVA 如何做到跨平台。
模拟面试面试题汇总 
u011526274的博客
04-27 2981
模拟面试面试题汇总 第一轮面试题 一、描述下数据库中的事务--ACID各个的特点。 原子性：事务中的操作要么全部成功要么全部失败。 一致性：事务前后数据的完整性必须保持一致。 隔离性：多个并发的事务之间是相互隔离的，互不干扰的。 持久性：事务提交后，数据是永久改变的。 二、什么是springboot？你们公司是用的哪个版本？ SpringBoot是Spring推出用于解决传统框架配置文件冗余,装配组件繁杂的基于Maven的解决方案,旨在快速搭建单个微服务。 版本号：2...
运维面试题
weixin_42690304的博客
09-18 2万+
运维面试题 NETWORK 1 请描述TCP/IP协议中主机与主机之间通信的三要素 参考答案 IP地址（IP address） 子网掩码（subnet mask） IP路由（IP router） 2 请描述IP地址的分类及每一类的范围 参考答案 A类1-26 B类128-191 C类192-223 D类224-239组播(多播) E类240-254科研 3 请描述A、B...
计时器和工作管理器 API 的描述
weixin_30478923的博客
02-26 93
IT培训(14) (rss) Java EE (rss) Java SE(2) (rss) JVM(1) (rss) MyEclipse(1) (rss) Open Source(1) (rss) Oracle(1) (rss) WebLogic(6) (rss) 中间件监控(1) (rss) 产品与服务(4) (rss) 资讯频道(4) (rss) 常用...
JAVACORE与HEAPDUMP生成方法
热门推荐
Z.Virgil的博客
11-01 2万+
目录 前言 JAVACORE篇： Windows平台： ORACLE JDK：HOTSPOT IBM JDK：V9 LINUX平台：　　　　　　　　　　　　　　　　　　 HEAPDUMP篇： Windows平台： ORACLE JDK：HOTSPOT IBM JDK：V9 LINUX平台: 前言 在项目上我们经常要生成javacore和heapdump来进行分析。这里总...
【案例6】NC安装部署常见问题
Z.Virgil的博客
03-11 2万+
目录 问题1：Too many open files 问题现象 解决办法 问题2：图形化报错 问题现象 解决办法 问题3：nmc启动报环境不符合 问题现象 解决办法 问题4：64位系统安装了32位的软件 问题现象 解决办法 问题5：参数配置 问题6：部署EJB，SOAPConnectorClient异常 问题现象 解决办法 问题7：重置拒绝会话证书存储 问...
SPR使用说明
Z.Virgil的博客
03-15 8503
什么是SPR? SPR是一个客户端一段时间业务操作的系统运行情况的总结报告。这个报告涵盖了客户端JVM信息、物理内存、是否启用前台缓存、业务操作性能概要、远程调用、sql信息、客户端信息以及是否报错等内容。这个报告有利于诊断业务操作的性能以及报错问题。 补丁说明 NC65、NC633标准产品已自带SPR功能，其它版本支持情况说明： NC5X版本：不支持； NC633之前的NC6X版...
【案例3】WebSphere7+HTTPS访问配置方法
Z.Virgil的博客
03-08 5773
网页访问配置方法 目录 网页访问配置方法 合成p12证书文件 合成步骤 Httpd.conf文件配置 导入用户提供的证书到was的证书库 ufida.p12证书库导入D:\IBM\HTTPServer\Plugins\config\webserver1\plugin-key.kdb证书库 ufida.p12证书导入D:\IBM\AppServer\profiles\...
IBM WebSphere MQ错误码详解与输入/输出指令解析
本文将详细讲解输入/输出指令在众为兴驱控一体机ADT-RC400上使用AR语言进行控制时的相关知识，以及IBM Websphere MQ中的错误码处理。 1. 输入/输出指令 在AR语言中，输入/输出指令主要用于读取和设置硬件接口的状态...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值