【Redis & 知识储备】冷热分离架构 -- 分布系统的演进（5）

于 2024-04-07 23:26:25 发布
阅读量452 收藏 2
点赞数 5
分类专栏： Redis 文章标签： redis 架构 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zxj20041003/article/details/137482301
版权
文章探讨了冷热分离架构在应对海量请求时如何通过缓存（如Redis）减轻数据库压力，提高性能。同时，介绍了架构的优点（如性能提升）和挑战（如缓存一致性问题、成本增加及数据库瓶颈）。
摘要由CSDN通过智能技术生成

冷热分离架构

简介

引入缓存, 实行冷热分离, 将热点数据放到缓存中快速响应 (如存储到 Redis中)

出现原因

海量的请求导致数据库负载过高, 站点响应再读变慢

架构工作原理

多了缓存服务器, 对于热点数据全部到缓存中, 不常用数据再去查询我们的数据库

技术案例

在这里插入图片描述

架构优缺点

  • 优点
    • 大幅度降低对数据库的访问请求, 性能提高非常明显
  • 缺点
    • 带来了缓存一致性, 缓冲击穿, 缓存失效, 缓存雪崩等问题
    • 服务器成本需要进一步增加
    • 业务体量支持变大后, 数据不断增加, 数据库单库太大, 单体表体量也太大, 数据查询会很慢, 导致数据库再度成为系统瓶颈
杰深入学习计算机
关注
  • 5
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
关于redis的冷热数据分离
StoneNie的专栏
01-24 2万+
一、概述 当前KV数据库从存储介质可以分为两种模式，一种是以内存为主持久化为辅，如memcache（无持久化）、redis等；一种是以持久化为主内存为辅，如ssdb（基于leveldb/rocksdb存储引擎）。这两种模式代表了两种不同的选择策略和哲学，适应不同的业务场景。简单地说，以内存为主的模式侧重高性能，信奉“内存是新的硬盘”的哲学；以持久化为主的模式则侧重大容量，兼顾性能。   对于
云上如何做冷热数据分离
weixin_34242509的博客
12-19 381
前言 随着业务的发展和持续运行，系统会产生大量的数据，数据的增长伴随而来的是对数据库的考验，在达到一定的数据量之后数据库的访问性能就会持续下降，为了系统的稳定运行，得要么提高数据库访问性能，要么把数据限定在一定的量上。前者会导致IT系统的不断投入，投入产出比不高，且早晚会达到系统的瓶颈，后者需要抛弃旧的数据，从历史数据的完整性上来说也是我们不愿意看到的。...
冷热分离解决方案
qq_28227405的博客
10-07 1339
业务背景：系统在使用的过程中随着业务数据量越来越多，已经超过了数据库中单表的承受能力，系统的瓶颈在数据库IO上，这时候可以通过冷热数据分离的方式来解决查询速度慢的问题。数据库IO瓶颈的解决方案除了冷热分离，还有读写分离，分库分表等方案。
冷热分离和直接使用大数据库_对数据冷热分离存储的思考
weixin_39842955的博客
12-29 641
对于冷热数据分层存储的最直接的目的就是节省成本，计算机结构里，内存->nvme ssd->ssd->机械盘，访问速度依次降低，单位成本依次降低，存储密度依次增大。对于像redis这种天生为高速大并发设计的高性能系统，数据存储也理应放在内存。但是我们大多数的使用redis的场景可能并不是所有数据冷热度是相同的，有些时候我们的系统中也实在用不到100%的redis性能，能满足场景需求...
redis-stack-server 7.2.0 安装包合集
04-03
redis-stack-server-7.2.0-v9.arm64.snap redis-stack-server-7.2.0-v9.bionic.arm64.tar.gz redis-stack-server-7.2.0-v9.bionic.x86_64.tar.gz redis-stack-server-7.2.0-v9.bullseye.x86_64.tar.gz redis-stack-...
redis-session-manager-redis-session-manager-2.0.8.zip
最新发布
06-02
5. **扩展性**：Redis天然支持集群模式，当会话数据量增大时，可以通过扩展Redis集群来保证服务的稳定性和性能。 6. **故障恢复**：配置Redis备份和复制策略，确保session数据的安全性和在主服务器故障时的快速切换...
redis 免安装 redis客户端 redis-desktop-manager-0.8.8.384
02-16
2. **持久化**：Redis 可以通过 RDB (Snapshot) 和 AOF (Append Only File) 两种方式进行数据持久化，确保即使在系统崩溃后也能恢复数据。 3. **事务**：Redis 支持事务，可以一次性执行多个操作，并保证其原子性。...
redis-session-manager-redis-session-manager-2.0.2.zip
06-02
Redis Session Manager是一款基于Redis数据库实现的会话管理工具，主要用于在分布式系统中高效、安全地存储和管理Web应用的用户会话数据。标题中的"redis-session-manager-redis-session-manager-2.0.2.zip"表明这是...
redis-session-manager-redis-session-manager-2.0.3.zip
06-02
Redis Session Manager是一款基于Redis数据库实现的会话管理工具，它主要用在Web应用程序中，用于高效、安全地存储和管理用户的会话数据。这个压缩包文件"redis-session-manager-redis-session-manager-2.0.3.zip...
数据冷热分离，Hbase，Elasticsearch，redis，分库分表，缓存，kafka
weixin_45845680的博客
03-06 979
数据冷热分离，Hbase，Elasticsearch，redis，分库分表，缓存，kafka
Redis第七章之开发注意事项
醒狮运维:热爱IT运维的老攻城狮们
03-14 1893
Redis 第7章之开发注意事项 文章目录Redis 第7章之开发注意事项设计1.冷热数据分离，不要将所有数据全部都放到Redis中2.不同的业务数据要分开存储3.规范Key的格式4.拒绝bigkey5.建议控制key的生命周期开发1.O(N)命令关注N的数量2.禁用命令3.合理使用select4.使用批量提高操作效率 设计 1.冷热数据分离，不要将所有数据全部都放到Redis中 虽然Redis支持持久化，但是Redis的数据存储全部都是在内存中的，成本昂贵。建议根据业务只将高频热数据存储到Redis中【Q
Redis学习过程中的一些总结
qq_74136205的博客
03-05 1130
String是最常用的一种数据类型，普通的key- value 存储都可以归为此类。其中Value既可以是数字也可以是字符串。使用场景：常规key-value缓存应用。常规计数: 微博数， 粉丝数。虽然 Redis 是用 C 语言写的，但是 Redis 并没有使用 C 的字符串表示，而是自己构建了一种简单动态字符串SDS。
f2fs系列之五：冷热数据分离
weixin_33895475的博客
02-09 416
f2fs针对SSD介质，根据数据读写的频繁程度，实现了冷热数据的分离。 多路日志的原理 多路日志的相关数据结构 /* * For SIT manager * * By default, there are 6 active log areas across the whole main area. * When considering hot and cold data separatio...
[Redis]redis的二八定律，冷数据和热数据
新一的技术笔记
06-16 5023
目录 1.二八定律 2.redis的冷数据和热数据？ 2.1 方案一 配合SSDB 2.2 redis的lru？ 2.3数据的冷热？ 2.4建议 1.二八定律 网站访问数据的特点大多数呈现在"二八定律":80%的业务访问集中在20%的数据上。这时为了减轻数据的压力和提高网站的数据访问速度，则可以使用缓存机制来优化网站。 2.redis的冷数据和热数据？ redis是一种以内存为主的模式的高性能，内存是新的磁盘的哲学。 2.1 方案一 配合SSDB ssdb是什么？redis是内存..
redis的冷热数据处理
liao0801_123的博客
04-11 4748
参考:https://blog.csdn.net/rlnLo2pNEfx9c/article/details/81091547 阿里云提供redis混合存储产品,链接: 当前KV数据库从存储介质可以分为两种模式，一种是以内存为主持久化为辅，如memcache（无持久化）、redis等；一种是以持久化为主内存为辅，如ssdb（基于leveldb/rocksdb存储引擎）。这两种模式代表了两种不同...
Redis混合存储-冷热数据识别与交换
weixin_34128534的博客
07-17 447
背景 Redis混合存储产品是阿里云自主研发的完全兼容Redis协议和特性的混合存储产品。通过将部分冷数据存储到磁盘，在保证绝大部分访问性能不下降的基础上，大大降低了用户成本并突破了内存对Redis单实例数据量的限制。其中，对冷热数据的识别和交换是混合存储产品性能的关键因素。 冷热数据定义 在Redis混合存储中，内存和磁盘的比例是用户可...
大数据的一生一世——谈数据冷热分离技术
热门推荐
茅庐
06-14 1万+
本文探讨了大数据冷热分离的诸多解决方案，包括冷热分离异构系统、冷热分离同构系统。
这可能是最中肯的Redis规范了
weixin_34146805的博客
06-14 633
更多精彩文章。 《微服务不是全部，只是特定领域的子集》 《“分库分表" ？选型和流程要慎重，否则会失控》 这么多监控组件，总有一款适合你 《Linux生产环境上，最常用的一套“vim“技巧》 《使用Netty，我们到底在开发些什么？》 Linux五件套之类的。 《Linux之《荒岛余生》（一）准备篇》 《Linux之《荒岛余生》（二）CPU篇》 《Linux之《荒岛余生》（三）内存篇》 《Linu...
微服务架构（Kafka、Redis、MySQL）
06-07
本文档在三台机器上部署微服务架构: 1. 基于Redis5.0部署Redis集群 2. 基于mycat部署mysql读写分离集群 3. 部署zookeeper集群和kafka集群

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

杰深入学习计算机

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值