极客时间 Redis核心技术与实战 笔记（实践篇 性能和内存）

最新推荐文章于 2024-08-20 10:30:59 发布
最新推荐文章于 2024-08-20 10:30:59 发布
阅读量1.7k 收藏 1
点赞数
分类专栏： # Redis
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/hbkzhu13579/article/details/113832935
版权
本文探讨了Redis实例的阻塞点，包括客户端交互、磁盘交互、主从节点和切片集群实例交互时的阻塞，并提出异步执行的策略。此外，还分析了Redis响应延迟的应对方法，如避免慢查询和过期key操作的影响。针对内存占用问题，解释了内存碎片的成因和清理方法，以及缓冲区可能带来的风险。
摘要由CSDN通过智能技术生成

异步机制：如何避免单线程模型的阻塞？

Redis 实例有哪些阻塞点？

  • 客户端：网络 IO，键值对增删改查操作，数据库操作；
  • 磁盘：生成 RDB 快照，记录 AOF 日志，AOF 日志重写；
  • 主从节点：主库生成、传输 RDB 文件，从库接收 RDB 文件、清空数据库、加载 RDB 文件；
  • 切片集群实例：向其他实例传输哈希槽信息，数据迁移。

在这里插入图片描述

1. 和客户端交互时的阻塞点

复杂度高的增删改查操作肯定会阻塞 Redis

（1）集合全量查询和聚合操作
不同数据类型删除耗时：
在这里插入图片描述
（2）bigkey 删除操作
（3）清空数据库

2. 和磁盘交互时的阻塞点

（4）AOF 日志同步写。

3. 主从节点交互时的阻塞点

在主从集群中，主库需要生

最低0.47元/天 解锁文章
Holmes Zhu
关注
专栏目录
极客时间-Redis核心技术与实战笔记(1)
LIXL123456的博客
11-03 963
对一个大型软件系统的更好的学习方式：先建立起系统观，再关注具体的细枝末节。 先考虑简单的键值数据库架构： 理解数据模型和操作接口，知道Redis可以做什么，不能做什么。 数据模型： key-value类型，key类型对于不同数据库一般差别不大。 value类型： Memcached仅支持string类型，Redis支持多种类型。不同数据类型支撑不同业务需求，在性能空间效率等方面有差异。 数据操作： 简单的key-value1支持三种操作： PUT， GET，DELETE PUT：写入或更新key-value
Redis学习笔记
我是要成为海贼王的男人！
09-22 252
从键值数据库到redis 数据结构 全局哈希表 底层数据结构 底层数据结构一共有 6 种，分别是简单动态字符串、双向链表、压缩列表、哈希表、跳表和整数数组 压缩列表：类似数组， 和数组不同的是，压缩列表在表头有三个字段 zlbytes、zltail 和 zllen，分别表示列表长度、列表尾的偏移量和列表中的 entry 个数；压缩列表在表尾还有一个 zlend，表示列表结束。 跳表 跳表在链表的基础上，增加了多级索引，通过索引位置的几个跳转，实现数据的快速定位 不同操作的复杂度 单元素操作是基础；
redis核心技术与实战笔记
lucineslei的博客
11-04 2617
Redis比较粗浅的总结 一，作者讲了什么？ 1，Redis的底层数据结构 二，作者是怎么把这事给讲明白的？ 1，讲了Redis的数据结构：数据的保存形式与底层数据结构 2，由数据结构的异同点，引出数据操作的快慢原因 三，为了讲明白，作者讲了哪些要点？有哪些亮点？ 1，亮点1：string，list，set，hast,sortset都只是数据的保存形式，底层的数据结构是：简单动态字符串，双向链表，压缩列表，哈希表，跳表，整数数组 2，亮点2：Redis使用了一个哈希表保存所有的键值对 3，要点1：五种数据形
优化redis数据检索：SCAN、SSCAN与SMEMBERS命令的工作机制与场景分析
最新发布
码上一元
08-20 606
redis中的 scan、sscan、smembers 的区别及使用场景
极客时间 Redis核心技术与实战 05 数据分布优化
郭传志的博客
11-17 1316
37 | 数据分布优化：如何应对数据倾斜？ 为了应对这个问题，我们可以通过运维规范，在分配之前，我们就要避免把过多的 Slot 分配到同一个实例。如果是已经分配好 Slot 的集群，我们可以先查看 Slot 和实例的具体分配关系，从而判断是否有过多的 Slot 集中到了同一个实例。如果有的话，就将部分 Slot 迁移到其它实例，从而避免数据倾斜。 ...
极客时间 Redis核心技术与实战 笔记（实践篇 集群）
朱嫑膘的博客
02-18 2251
Redis主从同步与故障切换，有哪些坑？
极客时间 Redis核心技术与实战 笔记（基础篇）
朱嫑膘的博客
02-17 3367
Redis 概览 Redis 知识全景图 Redis 问题画像图 基础篇 基本架构 数据结构 数据类型和底层数据结构映射关系 全局哈希表 链式哈希解决哈希冲突 渐进式 rehash 不同数据结构查找操作的时间复杂度 不同操作的复杂度 单元素操作是基础； 范围操作非常耗时； 统计操作通常高效； 例外情况只有几个。 第一，单元素操作，是指每一种集合类型对单个数据实现的增删改查操作。例如，Hash 类型的 HGET、HSET 和 HDEL，Set 类型的 SADD、SREM、SRANDMEMBE
极客时间 Redis核心技术与实战 笔记01 基础篇
热门推荐
郭传志的博客
08-03 1万+
01 | 基本架构：一个键值数据库包含什么？ 而 Redis 支持的 value 类型包括了 String、哈希表、列表、集合等。Redis 能够在实际业务场景中得到广泛的应用，就是得益于支持多样化类型的 value。 为了和 Redis 保持一致，我们的 SimpleKV 就采用内存保存键值数据。接下来，我们来了解下 SimpleKV 的基本组件。 大体来说，一个键值数据库包括了访问框架、索引模块、操作模块和存储模块四部分（见下图）。接下来，我们就从这四个部分入手，继续构建我们...
极客时间 Redis核心技术与实战 笔记（实践篇 数据结构）
朱嫑膘的博客
02-17 809
实践篇 “万金油”的String，为什么不好用了？ 为什么 String 类型内存开销大？ 当你保存 64 位有符号整数时，String 类型会把它保存为一个 8 字节的 Long 类型整数，这种保存方式通常也叫作 int 编码方式。 但是，当你保存的数据中包含字符时，String 类型就会用简单动态字符串（Simple Dynamic String，SDS）结构体来保存，如下图所示： buf：字节数组，保存实际数据。为了表示字节数组的结束，Redis 会自动在数组最后加一个“\0”，这就会额外占用 1
事务例子_实践篇（10）事务：Redis能实现ACID
weixin_29124971的博客
12-21 238
事务是数据库的一个重要功能。所谓的事务，就是指对数据进行读写的一系列操作。事务在执行时，会提供专门的属性保证，包括原子性（Atomicity）、一致性（Consistency）、隔离性（Isolation）和持久性（Durability），也就是 ACID 属性。这些属性既包括了对事务执行结果的要求，也有对数据库在事务执行前后的数据状态变化的要求那么，Redis 可以完全保证 ACID 属性吗？毕...
Redis系列 - Redis数据持久化（AOF&RDB）？
u011485472的博客
10-25 975
Redis系列 - Redis数据持久化（AOF&RDB）？ 宕机了，Redis如何避免数据丢失？ AOF RDB AOF Redis先将数据写入Redis内存，再记日志，Redis使用的写后日志。为了避免额外的检查开销，Redis 在向 AOF 里面记录日志的时候，并不会先去对这些命令进行语法检查。所以，如果先记日志再执行命令的话，日志中就有可能记录了错误的命令，Redis 在使用日志恢复数据时，就可能会出错。 AOF日志记录格式： 以 Redis 收到“set key1valu.
Redis
dadazgh的博客
03-17 451
Nosql概述 1、为什么要用Nosql 1、单机mySQL的年代 90年代，一个基本的网站访问一般不会有太大，单个数据库完全够了， 整个网站的瓶颈是什么？ 数据量太大，一个机器放不下！ 数据索引（B+树） 访问量（读写混合），一个服务器承受不了 只要发生以上情况之一，就必须晋级。 2、Mencached（缓存）+MySQL+垂直拆分（读写分离） 网站80%的情况都在读，每次都去查询数据库就十分麻烦！所以在中间加个缓存保证效率！ 发展过程：优化数据结构和索引–>文件缓存(IO)–>Menc
极客时间-Redis核心技术与实战笔记(4)
LIXL123456的博客
11-07 657
宕机，Redis如何避免数据丢失？ Redis是工作在内存中的键值数据库，服务器宕机后存在数据丢失的问题。 一种解决方法是从后端数据库恢复数据。 上述解决方法存在的问题：每次出现问题都需要访问数据库拷贝大量数据，给数据库带来巨大压力（这里有点疑惑，宕机很少出现，作者却说需要频繁访问数据库。访问数据不都是通过Redis吗？）。宕机后数据从慢速数据库读取，使用这些数据的应用相应变慢。 解决方法：数据持久化。 持久化两大机制：AOF(Append Only File)日志，RDB快照。 AOF日志实现：应用程序从
Redis核心技术及实战（零.前言）
ZYLer_的博客
05-25 353
零：前言 1. Redis知识全景图：“两大维度，三大主线”。 2. Redis问题画像图
Redis 缓存雪崩、缓存击穿、缓存穿透定义以及解决办法
子冉冰清的博客
03-22 521
Redis 缓存雪崩、缓存击穿、缓存穿透定义以及解决办法 在实际应用 Redis 缓存时，我们经常会遇到一些异常问题，概括来说有 4 个方面： 缓存中的数据和数据库中的不一致； 缓存雪崩； 缓存击穿； 缓存穿透。 只要我们使用 Redis 缓存，就必然会面对缓存和数据库间的一致性保证问题，这也算是 Redis 缓存应用中的“必答题”了。最重要的是，如果数据不一致，那么业务应用从缓存中读取的数据就不是最新数据，这会导致严重的错误。比如说，我们把电商商品的库存信息缓存在 Redis 中，如果库存信息不对，那
Redis底层数据结构、键值存储原理、哈希冲突解决方式、各种数据类型操作时间复杂度
诗和远方
03-23 969
Redis是什么？ Redis是一个键值数据库，以“快”著称 Redis是为什么这么快？ 我们都知道Redis很快，它在接收到一个键值对数据后，能以微妙级别的速度找到数据并快速完成操作。数据库这么多，为啥 Redis 能有这么突出的表现呢？一方面，这是因为它是内存数据库，所有操作都在内存上完成，内存的访问速度本身就很快。另一方面，这要归功于它的数据结构。这是因为，键值对是按一定的数据结构来组织的，操作键值对最终就是对数据结构进行增删改查操作，所以高效的数据结构是 Redis 快速处理数据的基础，也是Redi
Redis核心技术与实战
MyySophia的博客
02-24 3539
作为同时具备高性能、高可靠和高可扩展性的典型键值数据库，Redis不仅功能强大，而且稳定，理所当然地成为了大型互联网公司的首选。 众多大厂在招聘的时候，不仅会要求面试者能简单地使用Redis，还要能深入地理解底层实现原理，并且具备解决常见问题的能力。可以说，熟练掌握Redis已经成为了技术人的一个必备技能。 但是，在学习和使用Redis的过程中，总不可避免地遇见一些棘手的问题，比如： Redis的key和数据结构应该怎么设计？有什么最佳实践？ Redis集群如何均衡数据？又如何横向扩展？ 怎么保证
Redis核心技术及实战（七、八 . 哨兵）
ZYLer_的博客
05-25 380
七：哨兵机制——实现不间断服务 原文：《07丨哨兵机制：主库挂了，如何不间断服务？》 当主库挂了之后，写服务会中断、从库无法进行数据同步。我们需要运行一个新的主库，比如说把一个从库切换为主库，这就涉及到三个问题： 主库真的挂了吗？ 该选择哪个从库作为主库？ 怎么把新主库的相关信息通知给从库和客户端？ 要解决这三个问题，就需要用到哨兵机制。哨兵其实就是一个运行在特殊状态下的Redis进程，只不过不执行读写请求操作。 哨兵机制的流程： **监控：**哨兵会在运行过程中，周期性地向所有主从库发送PING命令
Redis 数据结构：快速的Redis有哪些慢操作？
小楼一夜听春雨，深巷明朝卖杏花
10-15 1081
一提到 Redis，我们的脑子里马上就会出现一个词：“快。”但是你有没有想过，Redis 的快，到底是快在哪里呢？实际上，这里有一个重要的表现：它接收到一个键值对操作后，能以微秒级别的速度找到数据，并快速完成操作。 数据库这么多，为啥 Redis 能有这么突出的表现呢？一方面，这是因为它是内存数据库，所有操作都在内存上完成，内存的访问速度本身就很快。另一方面，这要归功于它的数据结构。这是因为，键值对是按一定的数据结构来组织的，操作键值对最终就是对数据结构进行增删改查操作，所以高效的数据结构是 Redi..
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值