【二十六】springboot整合jedis和redisson布隆过滤器处理缓存穿透

已于 2024-03-10 20:41:39 修改
阅读量3.8k 收藏 42
点赞数 20
分类专栏： My Springboot Study Note 文章标签： 缓存 spring redis
于 2022-08-07 13:16:37 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_56995925/article/details/126208394
版权

互相交流入口地址 

整体目录：

【一】springboot整合swagger

【二】springboot整合自定义swagger

【三】springboot整合token

【四】springboot整合mybatis-plus

【五】springboot整合mybatis-plus

【六】springboot整合redis

【七】springboot整合AOP实现日志操作

【八】springboot整合定时任务

【九】springboot整合redis实现启动服务时热点数据保存在全局和缓存

【十】springboot整合quartz实现定时任务优化

【十一】springboot整合异步调用并获取返回值

【十二】springboot整合WebService

【十三】springboot整合WebService关于传参数

【十四】springboot整合WebSocket

【十五】springboot整合WebSocket实现聊天室

【十六】RabbitMQ基础篇（下载安装并基础使用，内含各种坑问题）

【十七】RabbitMQ基础篇（延迟队列和死信队列实战）

【十八】springboot实现自定义全局异常处理

【十九】初学Kafka并实战整合SpringCloudStream进行使用

【二十】springboot整合ElasticSearch实战（万字篇）

【二十一】springboot整合过滤器实战

【二十二】springboot整合拦截器实战并对比过滤器

【二十三】springboot整合activiti7（1）实战演示篇

【二十四】springboot整合spring事务详解以及实战

【二十五】springboot使用EasyExcel和线程池实现多线程导入Excel数据

【二十六】springboot整合jedis和redisson布隆过滤器处理缓存穿透

【二十七】springboot实现多线程事务处理

【二十八】springboot之threadLocal参数解析器实现session一样保存当前登录功能 

【二十九】springboot整合logback实现日志管理

【三十】springboot项目上高并发解决示例

目录 

一、什么是缓存穿透

二、怎么解决缓存穿透

三、springboot怎么使用Redis

四、springboot怎么使用布隆过滤器

五、springboot整合Jedis

六、springboot整合Redisson

六、准备demo所需

七、测试

98dab77ec5c20a2f442e2f45b115d7b7.png

        本章来学习记录一下关于缓存三大典型问题其一的缓存穿透的基本解决方式：通过布隆过滤器以及设置null值。

        为了实现这一demo，需要整合jedis和redisson，所以本文主要会从下面几个方面开始讲述：

  • springboot整合Jedis
  • springboot使用Redis的两种方式（Jedis和Redistemplate）
  • springboot整合Redission布隆过滤器
  • springboot使用布隆过滤器的四种方式（设置到redis内，手写，Redission，Guava）
  • 编写代码测试缓存穿透

一、什么是缓存穿透

        首先本文的目的就是学习怎么通过布隆过滤器解决缓存穿透，那么缓存穿透是什么呢，大致如下图。

99f5389066494258a7f470339466e942.png

        为了解决数据库的压力问题，引入了缓存这一东西，将某些数据存入缓存后，接口直接从缓存取值，从而减轻数据库的压力。当客户端访问的数据在缓存中不存在时，就会到数据库查询，查到了再存入缓存，而缓存击穿就是恶意攻击，一直访问数据库中不存在的数据，导致直接穿过缓存，每次都击中数据库。

二、怎么解决缓存穿透

        解决缓存穿透的方式可以通过布隆过滤网和空值设置法，本文会将两种方法都使用到。

1、布隆过滤器：可以理解为就是一个普通的过滤器拦截器，将数据通过add方法存入过滤器之后，通过它提供的contains方法判断是否存在某个值，返回值也是true或者false，详细的自己百度一下。他会有一定的误差（返回true，表示不一定存在；返回false，表示一定不存在），但是我认为解决缓存穿透可以不用考虑这个问题，因为只需要确认它一定不存在就可以了。具体使用时，在项目启动时可以查询数据库，将所有需要缓存的数据存入过滤器，每次接口调用时，通过它先判断一遍，存在后再走后面的逻辑（查缓存、查数据库）。

5db6bf13bc8c42c3913b2afdad225816.png2、空值设置法：查询数据库时，若不存在该数据，设置一个过期时间短的缓存到redis，下次到缓存查询时就能查到该值，并直接返回对应的value值null，设置一个较短的过期时间是为了以防后面该值被误处理，一直查询处于空值，还有就是可能会出现大量的处于null值的缓存，占用缓存资源。

41922f54b11a46f4bbb08c286d7eb2a5.png

 3、综上，本次demo的缓存穿透解决方式，如下（综合两种方式）：

a18ad18a83e743da97941a45668831f2.png

三、springboot怎么使用Redis

        上面已经讲了如何解决缓存穿透，这小节就介绍一下，一般springboot怎么使用redis呢？很简单，通常有两种方式，一种是RedisTemplate，一种是Jedis。

  • RedisTemplate：RedisTemplate是SpringDataRedis中对JedisApi的高度封装。
  • Jedis：Jedis是Redis官方推荐的面向Java的操作Redis的客户端。

        原生jedis效率优于redisTemplate。

        前面有一章已经整合过 redisTemplate方式使用redis了，感兴趣的可以看看。【七】springboot整合redis（超详细）_

         所以后面在这次demo中会使用jedis来操作redis。

四、springboot怎么使用布隆过滤器

        springboot使用布隆过期器也有多种方式，比如使用谷歌的Guava。

<dependency>
	<groupId>com.google.guava</groupId>
	<artifactId>guava</artifactId>
</dependency>

         或者使用redis提供的redisson。

 <dependency>
     <groupId>org.redisson</groupId>
     <artifactId>redisson</artifactId>
</dependency>

        本次demo将会集成redisson的方式使用布隆过滤器。

五、springboot整合Jedis

        整合Jedis的方式很简单，直接引入依赖，配置好连接就可以了，如下： 

1、引入依赖

2964a9a3c68645ca847c45621b8691a3.png

2、新建配置文件（反正是学习，将配置写死在代码内也行）

05e291d5e9214785aabae3fd27180f28.png

3、编写redis配置文件（关于jedis的，后面会将redisson的也写在这个配置文件，我为了简便，通用配置信息）

13489fafee094585bcdcc97480efb758.png

        通过ResourceBundle配合静态块，将配置信息读取到并设置到jedis连接池进行创建连接池。

PS：也可以不使用连接池，直接使用Jedis，但是那样的话，会每次连接都会创建新的Jedis对象，推荐使用连接池的方式，类似数据库的连接池。

        然后通过 Jedis jedis = jedisPool.getResource()；就可以得到Jedis对象，就可以通过Jedis提供的Api方法进行redis的操作了。

六、springboot整合Redisson

        上面整合了Jedis，下面进行最后Redisson的整合，依旧是引入依赖，然后连接上缓存，再通过Redisson创建布隆过滤器即可。

1、引入依赖

c9869241b6bb4cf19331baf77c0be7a0.png

2、修改redisConfig（上面创建的配置文件，新增redisson的连接，以及布隆过滤器的创建）

5909a41830c64cccb402bf8be573bff9.png

PS：文章最开始提过布隆过滤器是有误差率的，所有在创建时会有参数来控制这个误差率，

91bc630d8a83437e845569821c42e858.png

第一个参数代表大小，第二个参数代表容错率，具体的就不提了，百度学习吧。 

再提一嘴，上述的bean要保证单例，要么自己实现或者交给spring管理就可以了，spring创建的bean默认是单例的。

六、准备demo所需

        本小结，介绍一下本次demo最后需要的准备，本章的ORM框架使用的是Mybatis-plus，前面也有讲过具体的使用【四】springboot整合mybatis-plus（超详细）

        所以需要创建mapper层等代码。 

1、创建数据库表

CREATE TABLE `product` (
  `pid` int NOT NULL AUTO_INCREMENT,
  `productName` varchar(255) COLLATE utf8_bin DEFAULT NULL,
  `price` varchar(255) COLLATE utf8_bin DEFAULT NULL,
  PRIMARY KEY (`pid`)
) ENGINE=InnoDB AUTO_INCREMENT=253 DEFAULT CHARSET=utf8mb3 COLLATE=utf8_bin;

2、随便导入几百条数据

6ca221ae15cc426fab1066ae222d69c8.png

3、创建实体映射类

18868bed474d42d59e4a85336ca68f23.png

4、创建mapper层

e493ae35c17a436dbebc6fc10c9f18d3.png

5、创建项目初始化时将产品信息存入缓存和布隆过滤器的操作

7c4d5290e5c54e57a81a9d943378a4cb.png

        关于实现的InitializingBean接口，在前面的章节也有说过，【问题篇】springboot项目通过数据库限制实例端口号_ 。

6、创建controller

6d3dece6305f4d448dcd2a1a4b8d9eff.png

        具体的处理流程就是前面贴的流程图的处理方式，最后一小节进行测试。

七、测试

        本次demo整合了swagger，所有直接通过swagger调用接口进行测试，前面有讲过如何整合swagger，【一】springboot整合swagger（超详细）_。 

1、测试数据库、缓存 、布隆过滤器中都存在的数据。

9745d914e67c4475a5662764d779d3eb.png

2adc6884f24f4c5cb268e135f4e66693.png布隆过滤器是二进制向量 

c4db6fdeb3ae4b61adbb03e7f1bf7d0a.png

9f11a4b136724bf4b1bea7a145d57e37.png

1bcbeb91738e4dadad373582e715c612.png可以看到走的是缓存。

2、测试数据库、缓存 、布隆过滤器中都不存在的数据。

c4f40b3ac844460b88d021d6069b47e9.png

控制台是空的，缓存和数据库都没走。 

3、测试布隆过滤器中存在的数据，数据库、缓存不存在的数据（模拟原本存在的数据，被删除了）

模拟操作：启动服务后，将id为1的产品从数据库和缓存中删除。

580180aefde4468c8f4e2c3d36dd4c18.png

681a08a400f8464a952cd537376003bb.png

会去缓存设置空值。

a4a6a3ecb02c4614b7733269f3ee935a.png

本次查询了数据库并缓存了一个null值。

0acd48134ac04a62876a28c95c1f30d5.png 当第二次请求时，查询id为1的产品时，如下:

d6cd3edcffc34518a22e429f62676da7.png

会去查询缓存，不会再次查询数据库了。

其他的情况本章就不再测试了，感兴趣的兄弟可以自己试试，到此null值设置法和布隆过滤器的解决办法都测试出效果了。

小z♂
关注
  • 20
    点赞
  • 踩
  • 42
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 5
    评论
专栏目录
jedis+redisson哨兵模式.zip
12-29
本资源含有redisson分布式锁和jedis常用的哨兵模式正确配置内容。
使用redisson替代jedis
06-22
使用redisson替代jedis中的的对应方法，以及对应的redis的命令在这三方中对应查询及操作，
spring 5.x 系列第8篇 —— 整合Redis客户端 Jedis和Redisson (代码配置方式)
黑白影的博客
01-29 2357
文章目录一、说明1.1 Redis 客户端说明1.2 Redis可视化软件1.3 项目结构说明1.3 依赖说明二、spring 整合 jedis2.1 新建基本配置文件和其映射类2.2 单机配置2.3 集群配置2.4 单机版本测试用例2.5 集群版本测试用例三、spring 整合 redisson2.1 单机配置2.2 集群配置2.3 存储基本类型测试用例2.4 存储实体对象测试用例附：Redi...
springboot redis客户端-混用RedisTemplate（lettuce、jedis）和Redisson客户端
最新发布
张小凡
03-13 832
教你如何在springboot中混用RedisTemplate（lettuce、jedis）和Redisson客户端
玩转 SpringBoot 2.x 之 快速集成 Jedis客户端（普通版）
12-22
前言 Java 开发 一般会选择 Jedis 客户端来进行 Redis 相关的操作，本文通过SpringBoot 项目带你快速上手 Jedis 相关的操作。 Redis 安装 请参考：带你学 Redis：Redis安装（二） 代码案例 基础配置操作 引入 jedis 客户端的依赖，具体代码如下： redis.clients jedis 添加 Jedis 客户端配置类，将JedisPoolConfig和 JedisPool 注入Spring的上下文中。具体代码如下： @Configuration public class JedisConfig { @Value("${redis
springboot-jedis.zip
06-07
springboot-jedis.zip
springboot2.x整合Redission
热门推荐
胖虎儿的博客
03-31 1万+
Reddissin也是一个redis客户端，其在提供了redis基本操作的同时，还具备其他客户端一些不具备的高精功能，例如 分布式锁+看门狗、分布式限流、远程调用等等
springBoot整合redission框架
军长的博客
03-29 1万+
springBoot整合redission框架 pom依赖 <!--整合redission框架start--> <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-data-redis</artifactId> </depe
Springboot 整合 Redisson
博客
06-06 1万+
Springboot 整合 Redisson
在Spring Boot项目中使用Redisson
Go_ahead_forever的博客
09-29 3280
Redission是一个基于Java的分布式缓存和分布式任务调度框架，用于处理分布式系统中的缓存和任务队列。它是一个开源项目，旨在简化分布式系统的开发和管理。：Redission支持分布式缓存，可以将数据存储在分布式环境中，以提高性能和可用性。它提供了各种数据结构，如分布式Map、Set、List、Queue等，可以用来存储和操作数据。：Redission提供了分布式锁的功能，允许多个线程或多个应用程序在分布式环境中协调对共享资源的访问，以避免竞态条件。
springboot集成redission（代码完整版）
m0_37825155的博客
10-11 6047
1.pom.xml <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 https://maven.apache.org/xsd
SpringBoot学习秒杀一、SpringBoot集成Redis (使用Jedis实现)
12-22
在Springboot中已经有实现好的jar包可以很方便的集成Redis,也可以自己来封装Jedis实现Redis，这里我们使用Jedis来封装，从而使我们的程序更具有灵活性 首先，我们需要安装Redis: redis下载 安装完成之后在控制台输入redis-cli 如果出现以下界面即表示安装成功 redis安装成功之后打开idea，我们新建一个Springboot项目，选择Create New Project 然后选择新建的项目类型为Spring Initializr 即可以很方便的新建一个Springboot项目 我在这里使用的是Maven作为包管理，因此生成的项目目录是这样的 项目
Redis框架Jedis及Redisson对比解析
08-18
主要介绍了Redis框架Jedis及Redisson对比解析,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
Java通过Jedis与Redis整合与事务控制 !
技术交流，进来交个朋友
12-22 964
Jedis 什么是jedis? Redis官方网站上列一些Java的客户端，有Jedis、Redisson、Jredis、JDBC-Redis、等其中官方推荐使用Jedis和Redisson。相当于Java操作Redis的中间件。在企业中用的最多的就是Jedis。Jedis提供了完整Redis命令，而Redisson有更多分布式的容器实现 导入依赖 <!-- https://mvnrepository.com/artifact/redis.clients/jedis --> <d
Spring Boot集成Redisson布隆过滤器案例
S&Y_shhy_QQ_1127833416
06-06 885
布隆过滤器实际上是一个非常长的二进制向量(bitmap)和一系列随机哈希函数。那什么又叫哈希函数呢？哈希函数指将哈希表中元素的关键键值通过一定的函数关系映射为元素存储位置的函数。（HashMap源码）布隆过滤器存储空间和插入/查询时间都是常数Hash函数相互之间没有关系，方便由硬件并行实现布隆过滤器不需要存储元素本身，在某些对保密要求非常严格的场合有优势布隆过滤器可以表示全集，其它任何数据结构都不能有一定的误判率（常见的弥补措施是：建立一个小的白名单，存储那些可能被误判的元素。
Spring-Cloud集成Redisson
Aubergines的专栏
01-02 9203
前言：目前官方罗列的连接redis的Java客户端虽然有六种最近六个月在更新，不过推荐的只有Jedis,lettuce,Redisson,一般用的比较多的是Jedis,不过相对来说Redisson的功能更强大一些，今天尝试了基于spring-cloud集成Redisson pom文件，我使用的是redisson的spring boot的starterredisson-spring-boot-st...
Spring Boot 集成 Redisson分布式锁（注解版）
Ascend1977的博客
06-09 1万+
在 Spring Boot 应用程序中使用 Redisson 可以方便地实现分布式应用程序的某些方面，例如分布式锁、分布式集合、分布式事件发布和订阅等。本篇是一个使用 Redisson 实现分布式锁的详细示例，在这个示例中，我们定义了DistributedLock注解，它可以标注在方法上，配合DistributedLockAspect切面以及IDistributedLock分布式锁封装的接口，来实现redisson 分布式锁的 API 调用。
Redisson与SpringBoot整合
抽象的螺旋
12-13 1万+
概述 官方解释，什么是redisson？ Redis Java Client with features of In-Memory Data Grid。 什么是redisson
springboot整合jedis
07-28
在Spring Boot中，可以通过整合Jedis来使用Redis作为缓存或者消息队列。下面是整合Jedis的步骤： 1. 添加依赖：在`pom.xml`文件中添加Jedis的依赖。可以使用以下依赖配置： ```xml <dependency> <groupId>redis.clients</groupId> <artifactId>jedis</artifactId> <version>3.6.0</version> </dependency> ``` 2. 配置Redis连接信息：在`application.properties`文件中配置Redis的连接信息，包括主机、端口、密码等。例如： ```properties spring.redis.host=127.0.0.1 spring.redis.port=6379 spring.redis.password= ``` 3. 创建Jedis连接池：在Spring Boot的配置类中创建Jedis连接池的Bean。可以使用以下代码示例： ```java import org.springframework.beans.factory.annotation.Value; import org.springframework.context.annotation.Bean; import org.springframework.context.annotation.Configuration; import redis.clients.jedis.JedisPool; import redis.clients.jedis.JedisPoolConfig; @Configuration public class RedisConfig { @Value("${spring.redis.host}") private String redisHost; @Value("${spring.redis.port}") private int redisPort; @Value("${spring.redis.password}") private String redisPassword; @Bean public JedisPool jedisPool() { JedisPoolConfig poolConfig = new JedisPoolConfig(); return new JedisPool(poolConfig, redisHost, redisPort, redisPassword); } } ``` 4. 使用Jedis进行操作：在需要使用Redis的地方，通过注入JedisPool对象并调用相应的方法来进行操作。例如： ```java import org.springframework.beans.factory.annotation.Autowired; import org.springframework.stereotype.Service; import redis.clients.jedis.Jedis; import redis.clients.jedis.JedisPool; @Service public class RedisService { @Autowired private JedisPool jedisPool; public void set(String key, String value) { try (Jedis jedis = jedisPool.getResource()) { jedis.set(key, value); } } public String get(String key) { try (Jedis jedis = jedisPool.getResource()) { return jedis.get(key); } } } ``` 以上就是Spring Boot整合Jedis的基本步骤。通过配置Redis连接信息和使用JedisPool对象，可以方便地在Spring Boot项目中使用Redis。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 5
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

小z♂

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值