产线OOM问题排查-20220506

已于 2022-05-25 10:51:41 修改
阅读量746 收藏
点赞数
分类专栏： 产线问题实操(JAVA) 文章标签： java 开发语言
于 2022-05-06 14:09:22 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u012294039/article/details/124608626
版权

收到告警应用服务频繁重启,查看监控,发现应用频繁fullGC

找运维拿下dump文件后MAT分析

(路径:阿里云盘/IT/产线问题积累/OOM/queryPurchaseHeader_without_SheetIdParam.hprof)

发现这个http请求线程下有很多mysql相关的ByteArrayRow对象(100487个) ,推测是db查询返回数据量太多的缘故.

继续往下找相关查询sql

这是一张明细表,表里有上百万的数据,可为什么会没带查询条件呢? 

查看查询对象属性,发现sheetId和sheetIdList都为空.

看了这个接口的使用场景,是根据单据号查询明细的接口,按理说sheetId和sheetIdList不可能都为空.

查看view层转发过来的参数

 发现很多view层带过来的参数都没有sheetId,导致中台服务查询时没带参数查了全表数据.

后续让前端排查什么样的场景下会不传sheetId过来.同时后端这边增加相关的参数非空校验.

TIPS:后续关于后端相关接口还是要做好入参必传校验,血泪史

Memory_向阳
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
产线OOM问题排查-20220512
u012294039的专栏
05-19 253
metaspace OOM随笔记录
产线问题排查
枫火的博客
05-27 126
即每5秒一次显示进程号为4383的java进程的GC情况， -XX:+PrintGCDetails 用来打印详细的GC信息。如果是线上环境，注意dump之前必须先将流量切走，否则大内存dump是直接卡死服务。拿到线程dump文件之后，搜索自己的worker名字。3.找到最有可能导致内存泄露的元凶，通常也就是消耗内存最多的对象；2.如果是堆溢出，导出堆dump，并对堆内存使用有个整体了解；1.分析OOM异常的原因，堆溢出？就可以查看某个pid的java服务占用内存排名前20的类。
【业务功能篇132】生产环境中出现oom问题，排查思路
studyday1的博客
12-15 1210
给大家还是举个例子吧，我们线上系统的一个真实例子，大家可以用这个例子在面试里来说，比如说当时我们有个系统，在后台运行，每次都会一下子从mysql里加载几十万行数据进来各种处理，类似于定时批量处理，这个时候，如果对几十万数据的处理比较慢，就会导致比如几分钟里面，大量数据囤积在老年代，然后没法回收，就会频繁full gc。代码进行优化、根据压测的情况去进行一定的jvm参数的调优，一个系统的QPS，一个是系统的接口的性能，压测到一定程度的时候 ，机器的cpu、内存、io、磁盘的一些负载情况，jvm的表现。
产线环境故障排查常用套路
qianshanding0708的博客
02-13 213
更多内容关注微信公众号：fullstack888线上故障主要会包括cpu、磁盘、内存以及网络问题，而大多数故障可能会包含不止一个层面的问题，所以进行排查时候尽量四个方面依次排查一遍。同时例如jstack、jmap等工具也是不囿于一个方面的问题的，基本上出问题就是df、free、top 三连，然后依次jstack、jmap伺候，具体问题具体分析即可。CPU一般来讲我们首先会排查cpu方面的问题。cp...
如何利用JVM在线调试工具排查线上问题
独行侠梦的博客
06-28 629
产上我们经常会碰到一些不好排查的问题，例如线程安全问题，用最简单的threaddump或者heapdump不好查到问题原因。为了排查这些问题，有时我们会临时加一些日志，比如在一些关键的函数...
面试官角度观察到的程序员技能瓶颈，同时给出突破瓶颈的建议 ...
lizhong
10-18 292
我在做技术面试官的时候，面试对象大多数是初级开发和高级开发，偶尔也会面试架构师。我发现，IT人的工资固然和相关技术的使用年限有关，但如果候选人的技能无法跨越到更高层次的话，他们的收入也就会停留在当前级别，哪怕工资年限再多，也无法提升工资水平。 比如，我就面试过不少工作了5,6年的程序员，他们的技能也就停留在增删改查阶段，那么只能领到初级程序员的工资。更可悲的时，在面试过程中我发现他们甚至...
这些资深架构师平时需要解决的问题，看看你离资深架构师还有多少距离？
web前端开发
08-17 247
来源 |https://www.cnblogs.com/JavaArchitect/p/9782591.html我目前奋力在技术架构的路上不断前行，虽然中间遇到很多障碍，目前自己感觉，...
2021-09-26
热门推荐
qq_25843323的博客
09-26 1万+
面试二问了整个项目的整体的流程，为什么选择某些技术或者基础组件 1.自我介绍 2.挑一个项目，画项目的架构图 Kafka发送数据之后立即返回还是等待ACK之后才返回？ Kafka工作流程： producter先从Zookeeper获取分区的leader producter将消息发送给leader Leader将消息写入本地文件 followers从leader pull消息 followers将消息写入本地后向leader发送ACK leader收到所有副本的A
Netty的ChannelPool导致内存泄漏的排查经历
Night Field' Blog
08-31 1355
背景 接到了线上机器的报警，登上服务器，发现是Java进程挂了，看日志报了OOM： java.lang.OutOfMemoryError: Java heap space 问题描述 内存溢出，那当然是看dump文件了。这里推荐大家在产线机器上都加上JVM参数-XX:+HeapDumpOnOutOfMemoryError -XX:HeapDumpPath={path}/{to}/{dump}，这样，JVM在OOM的时候，会自动做一个内存dump，相当于保存现场。 拿到dump文件，放到MAT里面分析，以下是
一次OOM问题排查过程实战记录
08-26
主要给大家介绍了一次OOM问题排查过程，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面来一起学习学习吧
kubernetes-oom-event-generator：当Pod的容器被OOMKilled后，生成Kubernetes事件
02-03
kubernetes-oom-event-generator 容器启动时生成Kubernetes事件，并指示该容器先前已被杀死。设计控制器侦听Kubernetes API中的新事件和事件更改。 每次收到有关事件的通知时，它都会根据事件的Reason和所涉及对象的...
OOM分析工具-MemoryAnalyzer.zip
01-11
OOM分析工具-MemoryAnalyzer JVM dump分析利器
简单的项目部署脚本（转载）
u010230019的博客
06-09 625
有些项目团队喜欢使用docker启动java服务,那么我们同样可以将上述脚本稍做改造,来实现基于shell+docker的简单项目部署能力。可以将核心节点的错误或者失败内容通过webhook发送到对应的告警平台,比如钉钉、飞书机器人等。把~/.ssh/id_rsa.pub内容添加到远程仓库的ssh秘钥中。执行start.sh脚本打包部署。start.sh脚本内容。
Java——简单图书管理系统
m0_74100417的博客
06-09 1295
数据类型变量iffor数组方法类和对象封装继承多态抽象类和接口今天就是把上述知识点全部都用起来 图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理系统图书管理
修改菜品——后端Java
weixin_53717695的博客
06-09 432
修改菜品——后端Java
（Javascript）AI数字人mp4转canvas播放并去除背景绿幕
最新发布
lx_nhs的博客
06-12 422
去除前：去除后： 3、可能会出现的报错 （1）视频路径跨域问题：解决：vue开启代理
【Java02】Java中数组的定义与初始化
饮冰室
06-10 526
推荐第一种方式。这种方式容易让人理解，数据类型是type[]，对象名称是arrayName。第二种方式有些老旧了。由于数组是一种引用变量（也就是一个指针），所以定义的时候还没有指向任何有效的内存空间，因此在定义数组的时候不能指定数组的长度，也不能直接使用。必须进行初始化。可以使用var让系统自动推断变量类型，既可以用于静态初始化，也可以用于动态初始化。
【2024最新华为OD-C/D卷试题汇总】[支持在线评测] CPU算力分配(100分) - 三语言AC题解(Python/Java/Cpp)
清隆学长的博客
06-11 284
### 问题描述 K小姐是某公司运营部门的主管,最近她需要对公司的两组服务器进行算力分配。每组服务器有多个算力不同的 $CPU$,其中 $A$ 组第 $i$ 个 $CPU$ 的运算能力为 $A[i]$,而 $B$ 组第 $i$ 个 $CPU$ 的运算能力为 $B[i]$。一组服务器的总算力是各 $CPU$ 的算力之和。 为了让两组服务器的算力相等,K小姐允许从每组各选出一个 $CPU$ 进行一次交换。她希望从 $A$ 组服务器中选出算力尽可能小的 $CPU$ 来交换,你能帮她计算出应该选择哪两个 $CP
docker设置容器不被杀死--oom-kill-disable
09-19
Docker提供了一个选项来设置容器不被操作系统杀死，该选项称为"oom-kill-disable"。oom-kill-disable是一个用于禁用内存超限时杀死容器的选项。 当容器内存使用量超出其可用内存的限制时，操作系统会触发一个内存...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值