Redis事务,持久化,主从复制,分片集群总结笔记

最新推荐文章于 2022-11-30 09:32:09 发布
最新推荐文章于 2022-11-30 09:32:09 发布
阅读量257 收藏
点赞数
文章标签： redis
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/a979096313/article/details/119580049
版权

总结了Redis的事务机制,持久化机制,主从复制,Redis Cluster分片集群

事务机制总结

  1. redis支持事务,但是是伪事务

  2. redis事务是放入队列中的

  3. 编译时期出错则全部回滚,运行期出错不会全部回滚只回滚错误,所以redis中的事务很少使用到

  4. 开启事务:multi 执行事务:exec

持久化机制总结

redis中有两种持久化机制:RDB和AOF

RDB快照

  1. RDB快照持久化为了保证性能

  2. 默认是RDB快照,在指定的时间间隔将内存中的数据集快照写入磁盘

  3. RDB快照持久化默认bgsava异步子线程执行,sava会阻塞线程RDB文件保存完才执行

  4. 优点:基于二进制数据备份,占用空间少,传输快,还可以自定义规则,如:save 3600 1 表示1个小时(3600s)内有一个键(key)被修改就会保存快照

  5. 缺点:最后一次持久化的数据可能丢失,bgsava也会阻塞redis服务创建子线程,影响redis效率

AOF

  1. AOF持久化为了保证安全

  2. 默认关闭,AOF为了解决RDB数据丢失的问题

  3. AOF只保存写的操作(增删改)

  4. 三种触发方式:always和everysec和no

    • always:每个写的命令,都会同步写入磁盘,影响redis性能.

    • everysec:每秒保存一次,在这一秒内执行写的命令同步至磁盘.

    • no:不同步至磁盘

  5. AOF重写主要是解决写入命令的AOF文件体积的庞大导致磁盘占用量大和数据还原速度巨慢.

RDB与AOF对比

  1. RDB默认开启,AOF手动开启

  2. RDB性能优先于AOF

  3. AOF安全高于RDB

  4. 如果两个都开启的话,AOF优先级高于RDB

  5. RDB储存的是指定时间的快照,AOF保存写的命令,逐行或每秒

  6. AOF的文件比RDB文件要大

  7. redis负载较高的时候,RDB要比AOF性能好

主从复制总结

  1. 主从复制是将一台服务器的数据复制到其他服务器上,前为主,后为从

  2. 主要解决是当一台服务器出现故障导致磁盘的损坏造成的单点故障,目的是提高高可用

  3. 主从复制的作用:

    • 读写分离:主写从读,主节点可写可读,从节点只可读,提高服务器的负载能力

    • 负载均衡:基于主从结构,配合读写分离,由从节点分担主节点负载,提高了服务器的并发量和数据的吞吐量

    • 数据冗余:实现了数据了热备份,是持久化之外的一种数据冗余方式

    • 故障恢复:主节点出现故障,从节点提供服务,实现快速的故障恢复

    • 高可用基石:基于主从复制，构建哨兵模式与集群，实现Redis的高可用方案

  4. 哨兵模式主要解决的是当主服务宕机了,需要手动将从服务器切换为主服务器,将手动改为自动了

  5. 哨兵也是一台服务器,只是不提供数据服务,但哨兵也会出现单点故障,就需要搭建哨兵集群,数量为单数

  6. 哨兵三大工作任务

    • 监控:不断的检查主服务器和从服务器是否运行正常

    • 提醒:当某个服务器出现问题,会及时的通知管理员

    • 自动故障迁移:当主服务器出现故障不能工作时就会出现自动故障转移,将主服务器的从服务器升级为主服务器,将其他的从服务器改为复制新的主服务器.当客户端试图连接失效的主服务器时,哨兵集群返回新主服务器地址.

  7. 主观下线:哨兵进程会使用PING命令检测与主和从服务器的连接状况.如果超时了或距离最后一次有效恢复PING命令down-after-milliseconds所指定的值的时间超过就标记为"主观下线".

    • 如果检测到是从服务器就直接标记"主观下线",因为影响不大.

    • 如果检测到是主服务器不能直接标记,因为会存在误判,这个时候就出现了客观下线.

  8. 客观下线:当哨兵将一个主服务器判断为下线之后,需要判断主服务器是否真的下线了,它会向同样监控主服务器的其他哨兵进行询问,如果其他哨兵认为主服务器也进入下线状态的话就确认客观下线.进行对主服务器自动故障转移.只适用于主服务器(Master).

  9. 一主二从三哨兵

  10. 问题解决:

    • 主从集群间可以实现自动切换，可用性更高

    • 数据更大限度的防止丢失

    • 解决哨兵的集群高可用问题，减少误判率

  11. 存在主服务器的写能力和储存能力有限的问题

Redis Cluster分片集群总结

  1. Redis Cluster分片集群主要是解决主从复制不能实现高可用,高可扩,在海量流量访问下提供稳定的服务

  2. 优点:

    支持数据分片功能, 将数据分配给不同的服务器上

    服务的高可用,自动故障转移,最大程度上避免了单点故障,提高并发量

    无中心架构

  • PS:如果有哪位大佬看出来有什么错误,可以告知一二,谢谢了.

cs大王
关注
reids的缓存机制，redis事务控制，redis分片机制，一致性hash算法，redis持久化策略，Redis内存策略，内存优化算法
dengs11111的博客
06-13 362
redis:利用缓存机制可以有效的降低用户访问数据的次数,减少了数据库的压力 缓存机制要素: 1.用k-v数据结构储存 2.要求缓存速度快 3.用lru算法控制内存大小 **LRU是什么？**按照英文的直接原义就是Least Recently Used,最近最久未使用法，它是按照一个非常著名的计算机操作系统基础理论得来的：最近使用的页面数据会在未来一段时期内仍然被使用,已经很久没有使用的页面很有可能在未来较长的一段时间内仍然不会被使用。基于这个思想,会存在一种缓存淘汰机制，每次从内存中找到最久未使用的数据然
Redis分布式集群实战——Redis主从复制、高可用、集群功能的实现
weixin_45792518的博客
05-23 801
1.Redis基础介绍与安装使用 1.1 什么是Redis？ Redis 是一个开源（BSD许可）的，内存中的数据结构存储系统，它可以用作数据库、缓存和消息中间件。 它支持多种类型的数据结构，如字符串（strings）， 散列（hashes）， 列表（lists）， 集合（sets）， 有序集合（sorted sets）与范围查询， bitmaps， hyperloglogs 和 地理空间（geospatial） 索引半径查询。 Redis 内置了 复制（replication），LUA脚本（Lua sc
redis集群
yangzhou__的博客
11-12 771
目录前言1.redis集群模式1.1redis集群1.2Redis群集2.Redis三种模式介绍2.1主从模式2.2主从复制流程2.3哨兵模式(Sentinel)3.搭建Redis主从复制3.1安装Redis3.2修改Redis配置文件3.3验证主从效果3.4报错排查4.哨兵模式5.Cluster集群总结 前言 redis群集有三种模式，分别是主从同步/复制、哨兵模式、Cluster，下面会讲解一下三种模式的工作方式，以及如何搭建Cluster群集 1.redis集群模式 1.1redis集群 在Redis
【Redis 系列】redis 学习十，Redis 集群搭建和主从复制
m0_37322399的博客
03-30 1013
主从复制的理论 先来说说什么是主从复制 主从复制，就是将一台 redis 服务器的数据，复制到其他的 redis 服务器上， 前者为主节点 master，后者为从节点 slave 数据的复制是单向的，只能是主机复制到从机，master 以写为主，slave 以读为主 默认的情况下，每台 redis 服务器都是主节点，并且一个主节点都会有多个从节点或者没有从节点，但是反过来，一个从节点，只能有一个主节点 主从复制的作用： 数据冗余 主从复制实现了数据的热备份，是持久化之外的一种数据冗余方式 故障恢复
redis集群和主从复制的原理详解
nandao158的博客
03-24 3316
这篇开始进行redis集群和主从复制的原理详解，前几篇我们都是分享的redis在单节点环境中运行的操作，而实际互联网项目中一般都是部署的redis集群，主从复制、主备等环境，今天我们开始详细分享： 1、单实例部署redis的弊端分析： 1）单点故障：即如果该服务挂了，redis也就完全不能用了。 2）容量有限：一台服务的容量一般不大，存储的内容大小有限。 3）压力：所有的读写操作都在改服务上进行，压力回比较大。 2、怎么解决这些弊端呢？ 1）集群部署一主多从，主挂了，某个从节点变成主节点。 2
Redis核心技术笔记——Redis主从、主从从、切片集群
weixin_43881925的博客
08-10 667
1.Redis主从集群 ​ 首先我们来谈谈Redis的高可靠性，Redis的高可靠性其实有两层含义 一是保证数据尽量少丢失或者不丢失，AOF和RDB持久化保证了 二是服务尽量少中断，Redis采用了增加副本冗余量（集群就是为了解决服务中断的问题） 什么是增加副本冗余量：将一份数据同时保存在多个实例上。即使有一个实例出现了故障，需要过一段时间才能恢复，其他实例也可以对外提供服务，不会影响业务使用。其实这也就是Redis的主从集群 1.1主从集群是如何保证数据的一致性——采用了读写分离 ​ 多实例保存同
Redis学习笔记9：主从复制
Vincent9847的博客
06-24 431
一、主从复制是什么？ 主从复制，是指将一台Redis服务器的数据，复制到其他的Redis服务器。前者称为主节点（master/leader),后者称为从节点（slave/follower);数据的复制是单向的，只能由主节点到从节点。Master以写为主，Slave以读为主。默认情况下，每台Redis服务器都是主节点；且一个主节点可以有多个从节点（或没有从节点），但一个从节点只能有一个主节点。 主从复制的作用主要包括：1、数据冗余：主从复制实现了数据的热备份，是持久化之外的一种数据冗余...
Redis学习笔记——主从复制
qq_37863891的博客
04-08 265
文章目录简介多台服务器连接的方案主从复制说明主从复制作用主从复制工作流程建立连接阶段 简介 对于redis的单机故障和容量瓶颈问题而无法实现“Redis”的高可用。需要的解决方法是： 准备多台服务器，互相连通。将数据复制多个副本保存在不同的服务器上，连接在一起，并保证数据是同步的。即使有其中一台服务器宕机，其他服务器依然可以继续提供服务，实现Redis的高可用，同时实现数据冗余备份。 多台服务...
带你认识什么是redis主从复制集群的原理和部署
最新发布
Java_LingFeng的博客
11-30 1132
本文主要介绍redis的主从复制集群，包括其架构模型，原理，高可用等；一、主从集群的介绍  redis的主从复制集群为了提高效率降低客户端等待时长，主从间的数据同步采用的是弱一致性的策略，即客户端请求发到主机后，不论是否同步到备机，都认为此次请求是成功的，这样虽然效率上提高了，但是数据一致性却得不到保障；所以redis提供了一个min-replicas-to-write参数用来配置，
Redis深度解析：持久化、主从复制与哨兵系统
"Redis学习笔记包含了Redis的安装与基本使用、持久化机制、主从架构、哨兵系统以及基于Redis3.0的集群构建等内容，同时也涵盖了如何使用Jedis进行连接和操作Redis，包括Jedis连接池、ShardedJedis分片集群以及Jedis...
Redis集群三种方式-主从复制
qq_40923390的博客
09-30 569
主从复制原理： 从服务器连接主服务器，发送SYNC命令； 主服务器接收到SYNC命名后，开始执行BGSAVE命令生成RDB文件并使用缓冲区记录此后执行的所有写命令； 主服务器BGSAVE执行完后，向所有从服务器发送快照文件，并在发送期间继续记录被执行的写命令； 从服务器收到快照文件后丢弃所有旧数据，载入收到的快照； 主服务器快照发送完毕后开始向从服务器发送缓冲区中的写命令； 从服务器完成对快照的载入，开始接收命令请求，并执行来自主服务器缓冲区的写命令；（从服务器初始化完成） 主服务器每执行一个写命令就会向
rediscluster全局数据_设计数据密集型应用（6-7）：分片、事务
weixin_39943992的博客
12-19 142
分片假设我们有一个单机数据库，上面有三张表：用户表、商品表和订单表。 业务刚起步的时候，数据量很少，这个只有三张表的数据库运行得很好。 随着业务发展，用户数量、商品数量、订单数量都在持续增长，数据库的负载越来越高。我们开始对数据库进行垂直拆分（垂直分片），把这三张表拆到三个数据库，而业务代码改改数据库的配置就好。 再后来，一个数据库也承载不了用户表的数据，需要对用户表进行水平拆分（水平分片）。比如...
Redis（三）——事务、快照 / AOF持久化、主从复制（两种方式和哨兵模式）、Redis集群（增加删除节点、分配插槽、创建失败处理方式、Jedis操作集群）、Redis常见问题和布隆过滤器
qq_41824825的博客
03-05 700
事务、快照 / AOF持久化、主从复制（两种方式和哨兵模式）、Redis集群（增加删除节点、分配插槽、创建失败处理方式、Jedis操作集群）、Redis常见问题和布隆过滤器
【redis】闲得无聊，来聊聊当下爆火的 redis集群，顺便搭一个玩玩呗
看，未来的博客
08-23 5746
愿打开此篇对你有所帮助。
Redis主从复制、哨兵模式和分布式集群
qq_40837310的博客
10-23 1796
为什么需要集群和高可用 为什么需要主从复制 主要是安全性和可用性的考虑，如果只有一个redis服务，一旦服务宕机，那么所有的客户端无法访问，会对业务造成很大影响，另一个是一旦硬件损坏，单机无法恢复，会对数据带来灾难性影响。另一个考虑是性能的提升，主从复制模式，写请求只能由master节点来处理，但是读请求可能用从节点来分担请求，提高效率。 可用性、数据安全、性能都可以通过搭建多个 Reids 服务实现。其中有一个是主节点（master），可以有多个从节点(slave)。主从之间通过数据同步，存储完全相同的数
redis主从复制与集群
sinat_26682309的博客
04-11 3293
主从复制 主从复制是主机数据更新后根据配置和策略，自动同步到备机的master/slaver机制，master以写为主，slaver只可读 作用：1、读写分离，性能扩展；2、容灾快速恢复 例如有三台服务器代号分别取为6379、6380、6381 首先按照需要修改各服务器conf配置文件，例如设置daemonize为yes；appendonly可关掉；如果6380、6381配置文件的参数...
redis主从复制、哨兵机制和集群
zhangxm_qz的博客
02-21 1350
1、复制（master-slave） 配置过程 修改 slave机器的 redis.conf 增加如下配置 slaveof 我这里两台slave 都配置 slaveof 192.168.159.10 6379 重启三台reidis 服务后 启动 执行 ./redis-cli 链接 本机redis 服务 然后执行info replication 可以看到主从状态信息如下 master： [r...
redis事务浅析
rhwayfun专栏
07-23 2279
事务可以简单理解为：把多件事当做一件事情处理，要么一起成功，要么一起失败。在Spring中可以配置一个事务管理器，然后在要进行事务处理的方法上添加@Transactional注解就可以了。对于redis事务，无外乎如此，有时候为了同时处理多个结构，会向redis发送多个redis命令。使用redis事务可以保证一个客户端在不被其他客户端打断的情况下执行多个redis命令。对于redis事务，我会从以
redis的三大模式主从，哨兵和集群
热门推荐
yan_0916的博客
12-12 2万+
一、前言二、redis主从复制1、主从复制的作用：2、主从复制的流程3、搭建主从复制3.1、搭建环境3.2、安装redis3.3、主服务器配置查看以下行3.4、从服务器配置查看以下行3.5、检测成果二、哨兵模式1、哨兵模式原理：2、哨兵模式作用3、哨兵结构组成4、故障转移机制5、搭建哨兵模式5.1、搭建环境5.2、验证：三、集群模式1、基础1.1、Redis集群的数据分片:1.2、Redis Cluster 工作原理1.3、Redis cluster基本架构2、搭建集群3、验证 一、前言   虽然Redi.
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值