线上故障之线程BLOCK

已于 2024-01-02 21:07:56 修改
阅读量353 收藏 16
点赞数 16
分类专栏： 故障分析 文章标签： java
于 2024-01-02 20:57:49 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44543482/article/details/135328170
版权

目录

故障现象

故障原因

解决方案

故障现象

添加工作表记录失败。后台接口延迟太高，返回处理失败。

后台服务机器cpu\内存无异常，但是有大量线程处理BLOCK状态。

075accf9d29f45ea9b11d18d6ca07b9e.png

46e4d017e7684f9db4d06524806b1318.png

故障原因

business服务中，使用默认的（同步）eventbus，导致大量同步操作，出现大量的等待获取锁的线程，最终导致死锁

解决方案

针对工作表记录的事件，使用异步的eventbus，其他事件暂时保持不变

小徐很努力
关注
  • 16
    点赞
  • 踩
  • 16
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
java线上问题定位_快速定位Java服务线上“系统性”故障
weixin_42364855的博客
02-16 461
在分析具体故障，先介绍一下几种常用的工具JDK中带有了一堆的工具是可以用来查看运行状况，排查问题的，但对于这些工具还是要比较清楚执行后会发生什么，否则有可能会因为执行了一个命令就导致严重故障，首先重点讲下影响比较大的jmap。最主要的危险操作是下面这三种：1.jmap -dumpjmap -dump:format=b,file=heap.hprof 1234。这个命令执行，JVM会将整个heap的...
线上故障定位分析全套方案
03-10
线上故障定位分析是IT运维中的重要环节，当系统出现异常时，快速准确地定位问题能够大大减少业务中断的时间，提高系统的稳定性和用户满意度。本文将详细介绍一套线上故障排查的全面方案，涵盖CPU、磁盘、内存和网络...
java基础知识之线程
weixin_43719759的博客
11-30 56
线程的状态管理(生命周期) 资源来源：微专业 Jdk1.5之前多线程的有5种状态，即：New，ready，runnable，block，terminated。 线程从创建到销毁的过程称之为生命周期。我们称这5种状态为线程的生命周期。 新建状态(NEW)和死亡状态(TERMINATED)是最容易理解的。 1、New状态：当线程对象被创建出来的时候，还没有调用start方法之前。 2、Ready状态：当线程对象调用了start方法但是此时处于多个线程在争夺CPU使用权的时候。只有争夺到了CPU的使用权才会进入到
线上故障 | 一条 SQL引发的血案
sharedCode源码交流
11-23 5303
欢迎关注公众号【sharedCode】致力于主流中间件的源码分析， 可以直接与我联系 事故现场 202-11-19 系统接收到大量的超时告警， 同时业务群里面也有很多客户反馈服务不可用。 开始排查 首先上grafana上面查看整体的服务状态， 从图中可以看出一点问题来，CPU几乎没有波动， tomcat线程数急剧上升, 系统的ops急剧下降。 这种是比较典型的资源阻塞类问题，为了印证这个想法，我们再看下当时的系统的GC情况 从上面的GC情况下，我们可以看出来，GC还是比较平稳的，整体的停顿市场也.
java 故障排查_java线上服务问题排查
weixin_39737757的博客
02-24 123
1、业务日志相关如果应用系统出现异常，一般都会在业务日志中体现统计当天业务日志中ERROR出现数量：egrep ERROR --color logname | wc -l ，如果错误数量过大，一般都是有问题的查看日志中ERROR后10行具体报错：egrep -A 10 ERROR logname | less ，或 -C 10 查看ERROR前后10行日志Java中，所有异常都继承自Throwa...
Quartz blocked 线上故障解决
热门推荐
huangpeigui的专栏
04-22 1万+
故障描述： 线上的job正常跑一段时间后就进入了blocked状态，更新quartz版本仍无法解决 故障分析： 先说正常获取、触发任务执行的流程： 调度器线程执行的时候，首先从 triggers 表获取状态为 WAITING 的将要发射的触发器，然后条件更新状态 TRIGGER_STATE 的值为 ACQUIRED ，更新成功则表示抢占到了，否则可能是被其他调度器抢占。然后插入触发器...
互联网产品线上故障管理规范
zouhui1003it的专栏
11-06 2250
备注：一年半以前网上搜索参考了多篇文章，结合实践做了修正和细化之后进行的内部规范，忘记收藏参考文的链接了。为了让产品人员和开发人员可以更快速解决问题，也为探索更好保证软件质量的方法，针对...
java线上应用故障性异常处理，经验总结
ronon77的专栏
07-08 902
一、摘要 由于硬件问题、系统资源紧缺或者程序本身的BUG，Java服务在线上不可避免地会出现一些“系统性”故障，比如：服务性能明显下降、部分（或所有）接口超时或卡死等。其中部分故障隐藏颇深，对运维和开发造成长期困扰。笔者根据自己的学习和实践，总结出一套行之有效的“逐步排除”的方法，来快速定位Java服务线上“系统性”故障。   二、导言 Java语言是广泛使用的语言，它具有跨平台的特性和...
互联网线上系统故障定位方法论
weixin_45727359的博客
02-15 401
背景有时候会遇到一些疑难杂症，并且监控插件并不能一眼立马发现问题的根源。这时候就需要登录服务器进一步深入分析问题的根源。那么分析问题需要有一定的技术经验积累，并且有些问题涉及到的领域非常...
分布式之线上监控工具CAT
weixin_44692700的博客
08-08 866
分布式监控CAT背景整体设计存储线上使用注意 转自 深度剖析开源分布式监控CAT 背景 CAT主要解决了什么问题？ 根据直观的监控页面快速定位生产问题，简化生产问题排查。 适用于分布式环境下的系统。对集群的运行情况做监控 CAT有哪些特性 实时处理，信息的价值会随时间锐减，尤其是事故处理过程中 全量数据 高可用，因为是一个监控平台，要服务于所有的业务系统，就算所有的业务系统都到下， CAT也需要提供监控供开发定位问题。 故障容忍，在侵入业务代码时，CAT本身故障不应该影响业务系统的正常运行。 高吞吐
MySQL线上常见故障剖析
12-21
MySQL线上常见故障剖析 MySQL是一个广泛使用的关系数据库管理系统，但是在实际生产环境中，MySQL可能会出现各种故障，影响系统的稳定性和性能。本文将对MySQL线上常见故障进行剖析，并提供相应的解决方案。 应用...
Java线上故障排查方案.rar
03-19
Java线上故障排查是每个Java开发者或运维人员必备的技能之一，尤其在生产环境中，快速定位并解决问题至关重要。本文将深入探讨Java线上故障排查方案，帮助你掌握一系列实用的方法和技术。 一、日志分析 1. 日志级别...
Java线上故障排查方案.pdf
01-27
### Java线上故障排查方案 #### 一、引言 在软件开发领域，处理生产环境中的问题是一项必备技能。生产环境中可能会遇到多种复杂的情况，比如代码bug、硬件故障、网络问题等，这些都可能导致应用程序无法正常运行。...
12. Hibernate 模板设计模式
这是一个web全栈开发的博客，取其精华去其糟粕，争取让大家一看就懂，一学就会，一用就成~
07-22 1260
如何运用模板设计模式重构 Hibernate 操作流程；持久化对象与序列化接口；OOP中有一个编码原则 ：写仅写一次。翻译过来就是，不要重复，要重用。答案是：使用模板设计模式进一步封装Hibernate的操作。在真实项目中，Hibernate仅仅只是完成项目中的一部分工作，需要和其它，如Spring等框架联合工作，一起承担整体项目的开发。Spring框架中就提供的有Hibernate模板对象。一个常规的、频繁的操作代码中，大部分代码不需要变动，只有小部分代码需要根据需求变动。
golang 接口
m0_70982551的博客
07-24 807
接口定义了一组方法，这些方法没有具体的实现。接口类型的变量可以存储任何实现了这些方法的类型的值。// 更多方法...在Go语言中，接口值是指存储了实现某个接口的具体类型值的变量。接口值由两部分组成：1.动态类型：这是接口值当前存储的实际类型。2.动态值：这是实际存储的值，该值必须实现了接口中定义的所有方法。
Swagger使用Map接受参数时，页面如何显示具体参数及说
最新发布
a1058926697的博客
07-26 364
后端使用Map接受参数，要求在swagger页面上显示具体的参数名称、类型及说明。当Map接受参数数量少时，可以使用Swagger自带的注解。自定义注解 @ApiGlobalModel。编写处理注解对应的插件。
springboot之自动装配
weixin_50153914的博客
07-23 495
Spring Boot 通过一系列注解和条件配置实现了自动装配机制，使得开发者无需手动配置大量的 XML 文件或 Java 配置类。自动配置机制利用文件中的自动配置类，并结合条件注解和组件扫描，实现了灵活且强大的自动装配功能。这样，开发者可以专注于业务逻辑的实现，而无需处理繁琐的配置细节。
Java线上故障分析：线程Dump与堆内存排查
"Java线上故障分析，主要涉及线程dump和堆内存分析，以及如何处理JVM崩溃等问题。" 在Java应用的线上环境中，故障分析是运维和开发人员必须掌握的重要技能。当遇到性能问题、服务中断或者异常崩溃时，线程dump和堆...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

小徐很努力

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值