一个 redis 异常访问引发 oom 的案例分析

最新推荐文章于 2024-02-22 14:53:16 发布
最新推荐文章于 2024-02-22 14:53:16 发布
阅读量1.5w 收藏 8
点赞数
分类专栏： 踏莎行·术
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/mindfloating/article/details/41790239
版权
文章详细记录了一次由于Redis异常访问引发的OOM问题的诊断过程。通过对现象的观察，初步判断可能与网络稳定性有关，但进一步分析发现实际上是应用代码中未对输入参数进行安全判断，导致创建了过大的数组，触发了内存溢出。同时，连接Redis时的网络异常是因为命令参数超过了Redis的最大限制。总结中强调了不应过分依赖现象，并提倡在问题排查时首先审视自身代码。
摘要由CSDN通过智能技术生成

「推断的前提是以事实为依据。」

这两天碰到一个线上系统的偶尔出现突然堆内存暴涨，这倒不是个什么疑难杂症， 只是过程中有些思路觉得可以借鉴参考，故总结下并写下来。

现象

内存情况可以看看下面这张监控图。

一天偶尔出现几次，持续时间一般几分钟不等。 当这种情况出现时，我们检查错误日志，发现有下面两几种 OOM 错误。

  • java.lang.OutOfMemoryError: GC overhead limit exceeded
  • java.lan
最低0.47元/天 解锁文章
mindwind-_-
关注
  • 0
    点赞
  • 踩
  • 8
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Redis OOM问题排查
Night Field' Blog
11-16 4010
1. 问题描述 看到Redis报了OOM的错误，而且服务响应速度非常慢，页面上丢了很多数据，赶紧起来查看问题。 2. 问题排查 我们的系统架构是双边双活的，两个DC（Primary和GSB）都会有数据写进来，通过API把数据存到数据库（双边数据库有复制），同时写到Redis队列一份（这里把Redis当成MQ来用），然后有个Job从redis队列里面把数据取出来，写到两边，流式地处理数据。对于...
redis内存溢出排查
最新发布
weixin_37049558的博客
07-22 95
redis相关学习资料：https://edu.51cto.com/video/4196.html作为一名经验丰富的开发者，我将教你如何进行Redis内存溢出排查。以下是整个流程的步骤和相应的代码示例。 步骤流程 步骤 描述 1 检查Redis实例的内存使用情况 2 检查Redis实例的内存配置 3...
记一次redis内存溢出报错RedisException: OOM command not
qq_36527154的博客
08-13 1216
测试环境报错群里的一直在报RedisException: OOM command not …之类的错误，嗯，查了下OOM是什么意思，找到原因主要是redis的内存超了。 下面直接redis-cli进入redis，info memory看一下6个G都用完了，keys * 看一下有什么异常，正常不会有这么多数据的，果然发现测试环境的报错信息该存到MongoDB里面的，结果存到redis里面了。 下面修改代码的错误，然后退出redis，删除redis里面的那些errLog：redis-cli keys "ERR_
redis 报oom异常
qq_41349888的博客
02-22 574
由于我们使用的是redis主从模式，然后分别找到redis.conf的文件，修改maxmemory 2048000kb。最后重启redis即可，systemctl restart redis。查看maxmemory 的值，以及used_memory的值。从这里看出：就是redis的maxmemory的值太小了。可以通过redis-cli，工具去查看内存信息。然后使用info命令查看redis的相关信息，进入到redis的服务器，先去看redis的配置。确认内存确实设置少了。
第三方库shiro-redis所引起的内存泄露问题分析OOM
xc2011的博客
05-05 508
2）getSessionFromThreadLocal()方法获取session的时候，顺便检查其他session是否超时，如果超时则移除掉，避免session的不断累积。源码，有需要的童鞋可以动手实现一下，但注意session很多时，采用检查、删除的方式可能也会有一定性能损耗，需要实际压测权衡一下哪种方案更好。线上某系统运行不到一周，响应速度变慢，并且多次重启，排查时发现CPU占用到100%，但这段时间系统并发量并未改变，数据库、缓存等也没发现异常。然后进一步往下追，可以看到出问题的地方是。
百度面试题：一个线程 OOM 后，其他线程还能运行吗？
m0_55849656的博客
06-14 494
百度面试题：一个线程 OOM 后，其他线程还能运行吗？
redis通关面试宝典
slw213106的博客
01-05 345
文章目录 1.redis基本的数据结构有哪些 3.布隆过滤器实现的原理和使用场景(高级数据类型) 4.1 watch乐观锁(对key变化监视) 4.2 分布式锁（悲观锁，对数据value监视） 5.1redis集群的主从复制模型是怎样？ 5.2 redis 主从复制的核心原理？ 5.3 主从复制会存在哪些问题呢？ 6.Redis消息队列的几种模式 6.1 基于List的 LPUSH+BRPOP 的实现
记录一个java后端开发失业后的历程
qq_39191462的博客
02-25 1103
java面试简历以及知识点的准备
程序员的成长课
GitChat
04-12 4890
内容介绍 知道和做到之间有一道鸿沟，要想跨越它，你不但要努力，还要讲究方法。《程序员的成长课》不仅传授知识，更教给读者如何做好。《程序员的成长课》中的理念、方法、工具可以指导读者更好地看清定位及发展方向，设计未来。如果读者不知道选择什么技术栈来学习，困惑于怎样在技术上持续精进，想转技术管理却没途径，想有章法地为跳槽加薪做准备，或者想转型却不知道自己除了技术还能干什么，建议认真读本书，它提供的方法和...
Redis OOM 问题排查
quwenqian的专栏
01-19 923
多个服务同时出现latency SEV2问题，经过排查发现是服务依赖的远程缓存Redis有6台host停止对外服务，另外其中一个slot是1主11从配置（默认1主4从），针对这些问题查找问题根本原因。
低版本Redisson的OOM问题
CSDNBOZI的博客
11-04 753
低版本的Redisson的OOM问题
redis overcommit memory (oom) 问题报错解决方法
03-27 2696
一，什么是overcommit or oom问题Linux对大部分申请内存的请求都回复"yes"，以便能跑更多更大的程序。因为申请内存后，并不会马上使用内存。这种技术叫做Overcommit。当linux发现内存不足时，会发生OOM killer(OOM=out-of-memory)。它会选择杀死一些进程(用户态进程，不是内核线程)，以便释放内存。当oom-killer发生时，linux会选择杀死...
记一次Redisson连接异常引起的OOM
第三眼的思绪
09-23 1万+
线上服务内存使用越来越高，日志出现较大量以下异常，内存始终无法释放 org.redisson.client.RedisTimeoutException: Command still hasn't been written into connection! Increase nettyThreads and/or retryInterval settings. Payload size in bytes: 0. Node sourc e: NodeSource [slot=0, addr=null, redi
Redis内存溢出: OOM command not allowed when used memory maxmemory
热门推荐
第一行代码
11-27 2万+
在一切正常的情况下，部分功能无法使用，并且在日志中发现异常信息：Caused by: redis.clients.jedis.exceptions.JedisDataException: OOM command not allowed when used memory > 'maxmemory' ，那么一定是redis的内存溢出，就是说存储的东西太多了，导致redis无法正常使用 并且...
Spring session(redis存储方式)监听导致创建大量redisMessageListenerContailner-X线程
weixin_30443075的博客
08-31 1530
待解决的问题 Spring session(redis存储方式)监听导致创建大量redisMessageListenerContailner-X线程 解决办法 为spring session添加springSessionRedisTaskExecutor线程池。 /** * 用于spring session，防止每次创建一个线程 * @return */ @Bean public Threa...
真实案例丨OOM内存溢出解决方案连载之一，【流式查询】不容错过！
威哥爱编程，CSDN 博客专家、全栈领域新星创作者、华为 HDE，愿交天下 IT 技术爱好者
09-09 771
ApiImplicitParam 注解中虽然可以指定参数是必填的，但是却不能代替 @RequestParam(required = true) ，前者的必填只是在 Swagger 框架内必填，抛弃了 Swagger ，这个限制就没用了，所以假如开发者需要指定一个参数必填， @RequestParam(required = true) 注解还是不能省略；由于我们现在没有设置 Swagger 要扫描哪些包，所以默认所有暴露的接口都被扫描了，所以就连同这个默认的异常处理接口一起被扫描出来了。...
Unable to send command Try to increase ‘nettyThreads‘异常引起的OOM
WXY的博客
12-07 7191
项目场景： 设备报警记录存储在redis里面，需要频繁访问redis取出报警时间对比，在项目运行一段时间后报错 无法发送命令！尝试增加“nettyThreads”和/或连接池大小设置节点源：NodeSource Unable to send command! Try to increase 'nettyThreads' and/or connection pool size settings Node source: NodeSource 后续还导致了项目被oom终止运行 看报错信息类似是连接池大小的
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值