netty 内存溢出的情况之一

最新推荐文章于 2024-09-11 23:00:00 发布
最新推荐文章于 2024-09-11 23:00:00 发布
阅读量7k 收藏 5
点赞数
文章标签： 内存溢出
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/diandianyilian/article/details/53992549
版权

最近在优化以前的项目，主要是把之前自己写的发送接收模块用上netty，可能是对netty的不熟悉，出了两次问题。

第一次在排查了一遍代码后没发现什么问题，而且是在项目稳定运行了一段时间和出现的，就侥幸的以为是偶然因素导致的，加上其他项目耽误着时间就把这个优先级放低了。

没想到过了一段时间又出现了，这次就必须去解决了。下面是错误的日志


这两次问题发现了一个规律，就是隔一段时间就出现，所以怀疑是某个变量没有释放，长时间的累积导致的内存溢出，所以隔了一天再去服务器上查看资源，果然有增长，虽然不太明显。

于是开始检查各个变量，在一个大神的建议下把一个变量释放掉了。这个变量之前没有考虑，以为jvm回自动回收。

修改代码后重新部署，隔了3天去观察，内存没有增长，看来是有效果。那就先这么着吧，隔个长一点的时间再观察观察

这是增加的一句话


diandianyilian
关注
Netty 内存池设计之总体管理代码实现
kuangzhanshatian的专栏
09-22 110
引言 前文我们介绍了 Netty 中内存池的总体管理相关算法与思路。涉及到的内容包含有：小内存分配、内存块管理、线程缓存。 本文我们将进一步分析其代码实现，帮助读者彻底地掌握 Netty 中内存管理的实现方式。 初始化与内存分配器 内存池初始化 内存池 PollArena 是内存分配的主要切入点。我们先来看下其属性。PoolArena 的属性主要分为三类。 1. 不可变的实例属性，用于存储一些基本...
记一次堆外内存溢出排查过程
热门推荐
列苗
09-30 1万+
服务器发布/重启后，进程占用内存 21%(3g)，观察进程占用内存，以一天4%左右的速度增长，一定时间过后，java 进程内存增长到接近 90%，服务器报警。此时 old 区占用 50%，未达到 CMS GC 阈值，因此不会触发 CMS GC，而导致服务器崩溃。本文记录排查过程，以及最后的解决方案。
一次 Netty 代码不健壮导致的大量 CLOSE_WAIT 连接原因分析
m0_71777195的博客
11-29 1603
到这里的问题就很清楚了，总结就是 netty 的代码不够健壮，一个 try-catch 包裹的逻辑太多，在 OOM throwable 异常处理时，没能成功注册事件也没有 close 已创建的连接，导致连接存在但是没有人监听事件处理。我们线上有一个 dubbo 的服务，出现大量的 CLOSE_WAIT 状态的连接，这些 CLOSE_WAIT 的连接出现以后不会消失，这就有点意思了，于是做了一下分析记录如下。修改就很简单了，在 catch 的 throwable 逻辑里关闭一下就可以了，这里就不贴代码了。
netty使用异常，nio使用DirectBuffer导致内存溢出
闫玉林的博客
04-23 2170
Netty是基于NIO的框架，因此在使用Netty时可能会出现DirectBuffer导致内存溢出问题。这是因为DirectBuffer是使用操作系统的内存空间，而不是JVM内存空间，因此如果不及时释放，就会导致内存泄漏。解决这个问题的方法有以下几种：及时释放DirectBuffer：在使用完DirectBuffer后，一定要及时释放。可以使用ReferenceCountUtil.release()方法手动释放，也可以通过Netty的内存池机制自动释放。
Netty笔记01-Netty的基本概念与用法
最新发布
weixin_46425661的博客
09-11 1071
本文主要讲解Netty的基本概念与用法
记一次 Netty 堆外内存溢出故障
JWJ292065332的博客
01-20 3041
记一次 Netty 堆外内存溢出故障
Netty内存泄露
tang_world的博客
03-05 3217
1.背景 1.1 直播平台内存泄漏问题 某直播平台，一些网红的直播间在业务高峰期，会有10W+的粉丝接入，如果瞬间发生大量客户端连接掉线、或者一些客户端网络比较慢，发现基于Netty构建的服务端内存会飙升，发生内存泄漏（OOM），导致直播卡顿、或者客户端接收不到服务端推送的消息，用户体验受到很大影响。 1.2 问题分析 首先对GC数据进行分析，发现老年代已满，发生多次FullGC，耗时达3分多，系统已经无法正常运行（示例）： 图 1 直播高峰期服务端 GC 统计...
netty https下内存溢出问题.
lkclkc88的专栏
08-22 1394
  在最近几个月使用netty实现了网络开发,其中就遇到使用https导致内存溢出的情况. 过程描述如下:  1, 在第一个版本当中,为了性能考虑,netty默认使用了内存池以及堆外内存,在测试环境上表现良好,然而在线上的使用过程中发现,运行一周之后netty+https会导致内存溢出. 测试与生产的差异在于生产环境因为用户的复杂性，会使用不同的ssl加密方法， 以及存在大量socket的创建，...
一次netty 堆外内存泄露排查
sixi7762的博客
06-25 999
最近在做一个基于 websocket 的长连中间件，服务端使用实现了 socket.io 协议（基于websocket协议，提供长轮询降级能力） 的 netty-socketio 框架，该框架为 netty 实现，鉴于本人对 netty 比较熟，并且对比同样实现了 socket.io 协议的其他框架，这个框架的口碑要更好一些，因此选择这个框架作为底层核心。任何开源框架都避免不了 bug 的存在，我们在使用这个开源框架的时候，就遇到一个堆外内存泄露的 bug，鉴于对 netty 比较熟，于是接下来便想挑战一下
Netty 防止内存泄漏措施
跨过山和大海的博客
03-06 1308
1. 背景 1.1 直播平台内存泄漏问题 某直播平台，一些网红的直播间在业务高峰期，会有 10W+ 的粉丝接入，如果瞬间发生大量客户端连接掉线、或者一些客户端网络比较慢，发现基于 Netty 构建的服务端内存会飙升，发生内存泄漏（OOM），导致直播卡顿、或者客户端接收不到服务端推送的消息，用户体验受到很大影响。 1.2 问题分析 首先对 GC 数据进行分析，发现老年代已满，发生多次 Ful...
JVM学习笔记3：内存溢出的十个场景
Vincent9847的博客
06-11 1221
内存溢出的十个场景 JVM运行时首先需要类加载器（classLoader）加载所需类的字节码文件。加载完毕交由执行引擎执行，在执行过程中需要一段空间来存储数据（类比CPU与主存）。这段内存空间的分配和释放过程正是我们需要关心的运行时数据区。内存溢出的情况就是从类加载器加载的时候开始出现的，内存溢出分为两大类：OutOfMemoryError和StackOverflowError。以下举出10个内存溢出的情况，并通过实例代码的方式讲解了是如何出现内存溢出的。 1.java堆内存溢出 当出现java.la
记一次Netty堆外内存溢出OutOfDirectMemoryError
pezynd的专栏
09-25 5825
netty网络通讯项目，内存溢出问题排查
netty byteBuf readBytes方法的小坑(内存溢出,LEAK问题)
weixin_37686054的博客
08-22 600
netty LEAK readBytes
netty集群，启动方式，SSL、堆外内存溢出
zwjzone的博客
04-13 975
netty额外知识点
Netty的 Client 和 Server 的处理效率差异 造成内存溢出
qq_40592484的博客
05-21 633
TCP 协议 tcp是一个面向流的协议 当两端的流动速度 不一致的时候 ,就会出现 某一方的宕机 故障场景 这是一个 Client 不断向服务端发送数据的例子 public class LoadRunnerSleepClientHandler extends ChannelInboundHandlerAdapter { static final int SIZE = Integer.parseInt(System.getProperty("size", "10240")); private
jvm内存溢出实例-Netty参数抽取
伊苏
05-31 536
内存溢出, 高级程序员的必修课 而且往往是伴随着大压力并发一起来 下面是一个实例 线程实例在另一个贴子里有讲, 这个实例线程上没问题, 就没有截图了 把JVM设置在最大内存64M, 好快速产生瓶颈 [img]http://dl2.iteye.com/upload/attachment/0117/7599/18e76dc0-5dd1-37d1-9c63-107b97ba11...
OutOfMemoryError: Cannot reserve 4194304 bytes of direct buffer memory Netty引起的堆外内存溢出OOM问题解决
东皋长歌的专栏
04-03 1486
通过DirectByteBuffer 分配内存时，可能会出现分配内存不够的情况，因此JVM如果发现堆外内存分配不足时，也会主动发起一次GC，只不过这次GC是通过System.gc() 实现的强制GC，但是在实际生产环境中我们都是通过JVM参数 -XX:+DisableExplicitGC，禁止使用System.gc()的，因此在实际使用过程中一定要注意分配内存的情况，避免出现内存泄漏。直接内存的申请相较堆内存慢，但是访问速度较快，对频繁使用的空间，使用直接内存可提升效率;（1）JVM内存模型。
netty做Pipe一端快一端慢时防止内存溢出进行的操作
weixin_30553837的博客
05-23 136
前段时间用netty3.x做了一个pipe的功能，读的速度很快，写的速度很慢，结果读总是把内存耗光（来不及写写到pipe的另一端），后面解决了这个问题。 原来的pipe的代码： public void messageReceived(ChannelHandlerContext ctx, MessageEvent e) throws Exception { inboundCh...
gateway报 netty堆外内存溢出问题解决io.netty.util.internal.OutOfDirectMemoryError
qq_18630487的博客
04-21 4784
gateway报 netty堆外内存溢出问题解决，很多博客都是一知半解并不能解决我的问题。但是大概得到一个信息，这bug是有netty导致的，一般是用了ByteBuf对象没有调用release()释放内存。如上图已经提示了错误发生的地方，自行去代码中改就好。本地把把项目跑起来，记得加JVM参数 -Dio.netty.leakDetectionLevel=paranoid 开启netty自带检测，级别调到最高（火力全开！事实证明，我的问题恰恰不在大部分里面。经过一番激烈的研究（百度），应该是依赖版本的bug。
netty quic BoringSSL 内存溢出如何解决
05-30
内存溢出是一个常见的问题，特别是在处理大量数据时。在使用Netty Quic和BoringSSL时，可能会遇到内存溢出的问题。以下是一些常见的解决方法： 1. 增加内存。可以通过增加JVM的堆内存或者Netty的ByteBuf内存池大小...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值