redisson+caffeine+redis分布式（异步通知）二级缓存方案

最新推荐文章于 2024-08-16 10:06:48 发布
最新推荐文章于 2024-08-16 10:06:48 发布
阅读量2.8k 收藏 15
点赞数 1
分类专栏： Java学习分享 文章标签： 分布式 java redis 缓存
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_40987088/article/details/114749489
版权
本文介绍了如何利用Redisson、Caffeine和Redis构建一个分布式二级缓存方案，旨在减少对Redis的访问并确保数据一致性。在Redis宕机时，可以从数据库恢复数据。通过Redis的发布订阅功能解决多进程间的缓存同步问题，避免并发一致性问题，同时避免引入额外的消息中间件。
摘要由CSDN通过智能技术生成

目录

方案设计的场景

代码实现

结束语

方案设计的场景

项目中以redis为主要数据源，所有查询都查询redis以提高程序并发能力。数据库仅做为持久化数据备份，当redis出现宕机情况，可以从数据库中恢复数据。

  • 提问：为什么不使用redis自带的持久化文件进行恢复？
  • redis持久化策略有两种AOF、RDB，AOF是将每一条操作命令记录到文件中，配置上默认是每秒一次写入文件，AOF文件过大时可以使用rewrite进行指令整理；RDB是redis数据快照，有save和bgsave两种方式生成RDB文件，前者是会阻塞主进程，后者是由主进程fork一个子进程进行异步操作，但相对占用更多的内存资源，但数据过大时还是会导致客户端暂停服务。
  • AOF对数据的完整性保存的较好，但AOF文件较大，恢复速度较RDB慢，损失1秒数据；RDB一般做冷备，五分钟或者更长时间进行一次备份，损失数据量较大，但恢复速度快，文件不易较AOF不易损坏。
  • 这两种AOF虽然损失一定性能，但数据完整性较好，建议开启；RDB仅在业务闲时进行备份即可。但考虑到我们在业务中使用redis作为类似持久化存储的方案，还是需要完全保证数据完整性，数据库中有完整数据，使用恢复程序，读取数据库再重建redis数据的方式进行恢复。（不过数据库数据可能也会不准，而且数据恢复程序导致开发量增大了，可能在数据结构调整、脏数据清理时程序还是有点用的。）

 

为了进一步减少对redis的访

最低0.47元/天 解锁文章
kino05
关注
专栏目录
smart-cache:基于Ehcache和Redis的Java分布式二级缓存，除了基本操作外，还可以实现所有级别的多计算机集群的缓存监视和获取。
05-26
智能缓存 介绍 基于Ehcache2和Redis的Java分布式二级缓存，除了基本操作外，还可以实现所有级别的多计算机集群的缓存监视和获取。 将独立缓存与特定结构中的Redis缓存系统同步，以实现全局缓存的统一管理。 动态地使用代码建立CacheManager和StoreLocation，以消除烦人的ehcache.xml配置文件，并防止在需要重新启动服务或停止工作时使高速缓存不同步。 用自我维护的哈希数据结构替换Redis的本机哈希类型，以使每个缓存元素的到期时间可控。 采用Redis.Topic机制实现缓存同步。 提供缓存管理监视页面。 实现多机本地缓存的获取功能。 与Jedis的API相似，可轻松实现操作。 最小化配置和包装，力求精简。 项目介绍 基于Ehcache2和Redis的实现的Java的分布式二级缓存。除基本操作以外实现多机集群时各级缓存的监管和抓取。 将单
微服务---分布式多级缓存集群实现方案(Caffeine+redis+nginx本地缓存+Canal数据同步)
爪蛙毁一生的博客
05-04 2666
多级缓存就是充分利用请求处理的每个环节，分别添加缓存，减轻Tomcat压力，提升服务性能： - 浏览器访问静态资源时，优先读取浏览器本地缓存 - 访问非静态资源（ajax查询数据）时，访问服务端 - 请求到达Nginx后，优先读取Nginx本地缓存 - 如果Nginx本地缓存未命中，则去直接查询Redis（不经过Tomcat） - 如果Redis查询未命中，则查询Tomcat - 请求进入Tomcat后，优先查询JVM进程缓存 - 如果JVM进程缓存未命中，则查询数据库
【分布式】多级缓存架构，缓存预热，进程缓存，caffeine本地缓存，Lua脚本与语法，nginx+openResty+lua网管缓存，缓存同步方案Canal ，高并发压测
最新发布
qq_50446805的博客
08-16 1202
Nginx能干嘛反向代理集群(携带负载均衡)静态资源服务器(动静分类)网关（多级网关）OpenResty是一个基于nginx的高性能web平台，用于更方便的搭建web服务和网关，可以是的网关更具有高并发能力、可扩展能力、动态网关能力。配合nginx，有完整的nginx能力可以基于lua进行扩展可以使用lua进行自定义的逻辑处理官网地址：https://openresty.org/cn。
缓存详解-在java项目中使用缓存，最主流的缓存caffeine+redisson
qq_32384985的博客
02-01 591
一般业务缓存需要满足最低的条件是：1.有边界，能定义缓存的大小2.有过期时间3.有合理的缓存淘汰策略。
SpringBoot Caffeine+Redisson配置二级缓存
一千个读者就有一千个哈姆雷特
01-11 2121
在高性能的服务架构设计中，缓存是一个不可或缺的环节。在实际的项目中，我们通常会将一些热点数据存储到Redis或MemCache这类缓存中间件中，只有当缓存的访问没有命中时再查询数据库。在提升访问速度的同时，也能降低数据库的压力。
Spring Boot缓存实战 Redis + Caffeine 实现多级缓存
xiaolyuh的专栏
12-21 1万+
在前文我们介绍了如何使用Redis或者Caffeine来做缓存。 Spring Boot缓存实战 Redis 设置有效时间和自动刷新缓存-2 Spring Boot缓存实战 Caffeine 问题描述： 通过使用redis和Caffeine来做缓存，我们会发现一些问题。 如果只使用redis来做缓存我们会有大量的请求到redis，但是每次请求的数据都是一样的，假如这一部分数据就放在应用服务...
SpringCache + Caffeine + Redis整合本地缓存为分布式缓存
念念不忘，必有回响
09-09 6737
文章目录背景Caffeine 简介相对于Guava Cache优化点整合缓存配置缓存使用自定义缓存删除注解reids 事件监听删除缓存测试测试类测试结果总结源码下载 背景 为什么我们明明有了分布式缓存redis，还要将本地缓存多此一举整合为分布式缓存呢。原因很简单，性能。不管redis多块，都需要网络请求，io耗时，如果使用本地缓存基本没有耗时。 Caffeine 简介 官方文档 Caffeine 是基于 JAVA 8 的高性能缓存库。并且在 spring5 (springboo 2.x) 后，spring
J2Cache - 基于内存和 Redis 的两级 Java 缓存框架
08-11
J2Cache 是一个为 Java 应用设计的高效、灵活的两级缓存框架，旨在提供一个在本地内存和远程 Redis 之间无缝切换的缓存解决方案。它允许开发者利用 Ehcache（或 Caffeine）作为本地缓存，同时集成 Redis 作为分布式...
layering-cache:为监控而生的分布式多级缓存框架
05-06
支持对缓存的管理和缓存命中率的查看支持缓存过期时间在注解上直接配置支持缓存的自动刷新（当缓存命中并发现二级缓存将要过期时，会开启一个异步线程刷新缓存）缓存Key支持SpEL表达式Redis支持Kryo、FastJson、...
缓存面试题大全 pdf版
04-19
- **Redis**：目前最主流的分布式缓存方案之一，支持多种数据结构，如字符串、列表、哈希表等，并且提供了丰富的客户端库。 - **Memcached**：简单高效的键值存储系统，适用于需要快速存取数据的场景。 - **Tair*...
阿里开源的缓存框架JetCache.pdf
10-09
JetCache支持TTL、两级缓存、分布式自动刷新等功能，并提供了Cache接口用于手动缓存操作。 JetCache的特性 1. 通过统一的API访问Cache系统 2. 通过注解实现声明式的方法缓存 3. 支持TTL和两级缓存 4. 通过注解...
java中的缓存技术
01-01
Caffeine提供了更精细的配置选项，如基于LFU（Least Frequently Used）的淘汰策略，以及异步缓存更新。 5. 缓存一致性问题：在多节点的分布式系统中，缓存一致性是个挑战。常见的解决方案有强一致性（如Raft、Paxos...
Mybatis的一级缓存和二级缓存详解
qq_42679014的博客
09-11 703
在mybatis中，缓存有两种。一种是一级缓存，一种是二级缓存。 一级缓存是存在于sqlSession对象中的，只要sqlSession对象还在，sqlSession对象产生的代理对象就可以拿得到一级缓存的数据。当sqlSession对象被回收或者调用clearCache()方法清理缓存时，该SqlSession对象的一级缓存的数据就会被清空。 二级缓存是存在于生产sqlSession对象的工厂SqlSessionFactory的实例化对象factory中。所有同一个factory生产的sqlSession
又一个新项目完结，炸裂！
努力做最接地气的编程干货分享，感谢关注
06-17 1219
深入业务场景的企业级实战项目，基于 Vue 3 + Spring Boot + Redis + ChatGLM AI + RxJava + SSE 的AI 答题应用平台。用户可以基于 AI 快速制作并发布多种答题应用，支持检索和分享应用、在线答题并基于评分算法或 AI 得到回答总结；管理员可以审核应用、集中管理整站内容，并进行统计分析。在线体验：https://yudada.code-nav.cn视频介绍：https://www.bilibili.com/video/BV1Xm421N7Xj/
CaffeineCache+Redis 接入系统做二层缓存，SPI 思路实现（借鉴 mybatis 二级缓存、自动装配源码）
风团团
06-20 4172
现在手上有个系统写操作比较少，很多接口都是读操作，也就是写多读少，性能上遇到瓶颈了，正所谓前人栽树、后人乘凉，原先系统每次都是查数据库的，性能比较低，如果先查 redis，redis 没数据再查数据库的话，但是还可以更快，那就是使用内存查询，依次按照内存、redis、db的顺序从快到慢查询，可使系统整体的性能提升一个档次，但是仅限于读多写少的场景，写多读少的场景没必要搞这么多缓存，搞多了缓存一致性也是个问题，就好比 mysql 数据库的读多写少，我们可以用 MYISM 存储引擎。
SpringBoot Cache使用Caffeine + Redis 支持多级缓存
zzhongcy的专栏
10-19 4003
今天发现一篇多级缓存文章，觉得很有参考价值，虽然目前还没有用这种架构，但是值得学习，再这里记录一下 为什么多级缓存 缓存的引入是现在大部分系统所必须考虑的 redis 作为常用中间件，虽然我们一般业务系统（毕竟业务量有限）不会遇到如下图 在随着 data-size 的增大和数据结构的复杂的造成性能下降，但网络 IO 消耗会成为整个调用链路中不可忽视的部分。尤其在 微服务架构中，一次调用往往会涉及多次调用 例如pig oauth2.0 的 client 认证[1] Caffeine 来自
SpringBoot下如何实现Redis + Caffeine二级分布式高性能缓存
热门推荐
Mirson - 多一些分享, 多一些进步
10-04 3万+
一、 设计目的 支持Spring Boot 服务下，Redis + Caffeine的高性能分布式缓存的实现。 减少应用服务的集成接入成本，快速实现缓存， 通过AOP方式拦截处理， 不侵入原业务逻辑。 支持多种功能特性，如异步、超时（全局/单条控制）、压缩等，满足各种业务场景需要。 二、 服务结构 应用服务通过集成GEMINI-CACHE缓存组件， 实现对应用服务接口的缓存功能，内部通过AOP机制做拦截处理， 不侵入业务逻辑， 支持一级、二级缓存的保存、更新与删除，以及实现分布式缓存的同步功能。 一
java二级缓存技术_smart-cache Java分布式二级缓存
weixin_28849465的博客
02-26 664
smart-cache是基于Ehcache2和Redis实现的Java分布式二级缓存.除基本操作以外实现多机集群时各级缓存的监管和抓取.将单机缓存以特定结构同步至Redis存储,实现全局缓存统一管理.编码方式动态创建CacheManager和StoreLocation.摆脱了烦人的ehcache.xml配置文件,同时避免服务重启或不可用时缓存未同步的问题．使用自身维护的hash数据结构,替换Red...
解决方案(9) 分布式的本地缓存、二级缓存
fwhezfwhez的博客
04-10 608
111
redis+caffeine两级缓存实现
04-30
Redis Caffeine两级缓存实现是一种常见的缓存策略，通过在两个级别的缓存中存储数据，可以提高访问效率和降低服务器负载。 Redis作为一种高效的内存数据库，在第一级别缓存中存储数据。当应用程序首次请求数据时，系统会先查询Redis缓存，如果数据不在Redis缓存中，则会向下一级的Caffeine缓存发出请求。 Caffeine是一种本地缓存库，它可以将数据存储在本地内存中，提高数据读取速度。在第二级别缓存中，Caffeine缓存可以充分利用客户端的内存资源，缩短对数据库或其他服务的访问时间。 在Redis-Caffeine两级缓存实现中，数据的读取顺序为：应用程序 -> Redis缓存 -> Caffeine缓存。如果数据还没有被存储在Redis或Caffeine缓存中，则需要从数据库或其他服务中读取数据，存储在Caffeine缓存中，以便下一次请求访问。 这种缓存实现方案不仅可以减轻服务器的负载，同时提高了数据读取效率和响应速度，提高了系统运行的稳定性和可靠性。但是需要注意的是，Redis和Caffeine缓存的使用要结合应用程序自身的实际情况，合理设置缓存更新和失效策略，避免缓存滥用和带来的数据一致性问题。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值