Spring Boot整合redis压测出现的堆外异常(OutOfDirememoryError)
redis常用客户端
Jedis
- 如果你在网上搜索 Redis 的 Java 客户端,你会发现,大多数文献介绍的都是 Jedis,不可否认,Jedis 是一个优秀的基于 Java 语言的 Redis 客户端,但是,其不足也很明显:Jedis 在实现上是直接连接 Redis-Server,在多个线程间共享一个 Jedis 实例时是线程不安全的,如果想要在多线程场景下使用 Jedis,需要使用连接池,每个线程都使用自己的 Jedis 实例,当连接数量增多时,会消耗较多的物理资源。
Lettuce
- 与 Jedis 相比,Lettuce 则完全克服了其线程不安全的缺点:Lettuce 是一个可伸缩的线程安全的 Redis 客户端,支持同步、异步和响应式模式。多个线程可以共享一个连接实例,而不必担心多线程并发问题。它基于优秀 Netty NIO 框架构建,支持 Redis 的高级功能,如 Sentinel,集群,流水线,自动重新连接和 Redis 数据模型。
但是博主最近在spring boot整合redis时报错OutOfDirememoryError
,便对Jedis客户端出现的bug进行了整理与分析。
Lettuce在高并发场景下遇见的问题以及解决办法
问题
对应用程序进行Jmter压力测试时产生堆外内存溢出异常,OutOfDirectMemory
- spring boot整合redis
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-data-redis</artifactId>
</dependency>
分析
- .springBoot2.0以后使用lettuce作为操作redis的客户端,它使用netty进行网络通信
- .lettuce的bug导致netty堆外内存溢出,netty如果没有指定堆外内存,默认使用-Xmx
- .可以通过-Dio.netty.maxDirectMemory进行设置,不能使用-Dio.netty.maxDirectMemory只去调大堆外内存
解决方案
* 1.升级lettuce客户端,
* 2.切换使用jedis
*
* lettuce,jedis来操作redis的底层客户端,spring在底层对lettuce和jedis进行了再封装redisTemplate
*
* 查看 RedisAutoConfiguration 自动配置类我们可以看到
* @Import({ LettuceConnectionConfiguration.class, JedisConnectionConfiguration.class })
* public class RedisAutoConfiguration
spring在底层对lettuce和jedis进行了再封装redisTemplate,所以我们可以通过排除Lettuce添加Jedis依赖来完成RedisTemplate得默认封装实现
@Import({ LettuceConnectionConfiguration.class, JedisConnectionConfiguration.class })
public class RedisAutoConfiguration
这里使用切换jedis的方式:
<!--引入redis-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-data-redis</artifactId>
<exclusions>
<exclusion>
<groupId>io.lettuce</groupId>
<artifactId>lettuce-core</artifactId>
</exclusion>
</exclusions>
</dependency>
<dependency>
<groupId>redis.clients</groupId>
<artifactId>jedis</artifactId>
</dependency>