redis的持久化和主从复制及redis集群

最新推荐文章于 2023-08-14 15:39:20 发布
最新推荐文章于 2023-08-14 15:39:20 发布
阅读量1.1k 收藏 3
点赞数
文章标签： redis java 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_69513977/article/details/126519364
版权

 

目录

 

一、redis的持久化

第一种持久化方式： RDB

第二种持久化方式：AOF

二、redis的主从复制

2.1 主从配置

2.1.1 主redis配置：无需任何配置

2.1.2 从redis配置：

        修改从redis服务器上的redis.conf文件，添加slaveof 主redis ip 主redis端口

 2.2 主从复制的过程

三、redis集群

3.1 redis集群是多少台？

3.2 为什么集群中有一台挂了，则整个集群都挂了呢？

3.3redis集群搭建

3.3.1 集群环境搭建

3.3.2.搭建步骤

一、redis的持久化

        Redis的高性能是由于其将所有数据都存储在了内存中，为了使Redis在重启之后仍能保证数据不丢失，需要将数据从内存中同步到硬盘中，这一过程就是持久化。

第一种持久化方式： RDB

         RDB方式的持久化是通过快照（snapshotting）完成的，当符合一定条件时Redis会自动将内存中的数据进行快照并持久化到硬盘。

​         RDB是Redis默认采用的持久化方式，在redis.conf配置文件中默认有此下配置：

save 900 1  #900秒内容如果超过1个key被修改，则发起快照保存
save 300 10 #300秒内容如超过10个key被修改，则发起快照保存
save 60 10000 #表示60秒内如果超过10000个key被修改，则发起快照保存

RDB持久化的优缺点：

优点: 让redis的数据存取速度变快

缺点：服务器断电时会丢失部分数据(数据的完整性得不到保证)

第二种持久化方式：AOF

默认情况下Redis没有开启AOF（append onlyfile）方式的持久化，可以通过配置redis.conf开启appendonly参数：

appendonly yes

AOF持久化策略：

#appendfsync always   #每次有数据修改发生时都会写入AOF文件。
appendfsync everysec  #每秒钟同步一次，该策略为AOF的缺省策略。
#appendfsync no        #从不同步。高效但是数据不会被持久化。

 AOF持久化的优缺点：

优点：持久化良好，能包证数据的完整性

缺点:大大降低了redis系统的存取速度

二、redis的主从复制

        持久化保证了即使redis服务重启也会丢失数据，因为redis服务重启后会将硬盘上持久化的数据恢复到内存中，但是当redis服务器的硬盘损坏了可能会导致数据丢失，如果通过redis的主从复制机制就可以避免这种单点故障

 

说明：

  • 主redis中的数据有两个副本（replication）即从redis1和从redis2，即使一台redis服务器宕机其它两台redis服务也可以继续提供服务。

  • 主redis中的数据和从redis上的数据保持实时同步，当主redis写入数据时通过主从复制机制会复制到两个从redis服务上。

  • 只有一个主redis，可以有多个从redis。

  • 主从复制不会阻塞master，在同步数据时，master可以继续处理client 请求

  • 一个redis可以即是主又是从

2.1 主从配置

2.1.1 主redis配置：无需任何配置

2.1.2 从redis配置：

        修改从redis服务器上的redis.conf文件，添加slaveof 主redis ip 主redis端口

 2.2 主从复制的过程

过程图：

 过程说明：

        a.从 会往 主 发送sync命令（同步）
        b.主 会往 从 发送rdb文件
        c.主 会往 从 发送写命令

注意：主死了从只能读

三、redis集群

架构图：

 

3.1 redis集群是多少台？

        redis集群最少是6台，原因是投票容错要超过半数：3台（主），然后为了redis高可用需要给三台主redis配置三台从redis

3.2 为什么集群中有一台挂了，则整个集群都挂了呢？

架构细节:

(1)所有的redis节点彼此互联(PING-PONG机制)，节点的fail是通过集群中超过半数的节点检测失效时才生效.

 (2)存取数据时连接任一节点都可以，但集群中有一个节点fail整个集群都会fail

 

redis集群中有16384个槽分给了3个节点，存取数据时根据crc16(key)%16384=0~16383 这样一个算法给要存储的数据分配一个槽，如果如上图Server1挂了，那么数据就没法存储，所以整个集群都挂了

3.3redis集群搭建

Redis集群中至少应该有三个节点。要保证集群的高可用，需要每个节点有一个备份机。

Redis集群至少需要6台服务器。

搭建伪分布式。可以使用一台虚拟机运行6个redis实例。需要修改redis的端口号7001-7006

3.3.1 集群环境搭建

[root@upload ~]# yum install ruby
[root@upload ~]# yum install rubygems
[root@upload ~]# gem install redis-3.0.0.gem

Successfully installed redis-3.0.0

1 gem installed

Installing ri documentation for redis-3.0.0...

Installing RDoc documentation for redis-3.0.0...

[root@localhost ~]# cd redis-3.0.0/src
[root@localhost src]# ll *.rb
-rwxrwxr-x. 1 root root 48141 Apr  1  2015 redis-trib.rb

3.3.2.搭建步骤

注意：必须删除dump.rdb和appendonly.aof文件

搭建伪分布式，需要6个redis实例放到/usr/local/redis-cluster目录下，并且运行在不同的端口7001-7006

cp -r  /usr/local/redis  /usr/local/redis-cluster/redis-7001

3.3.3.创建6个redis实例

每个实例运行在不同的端口。还需要修改redis.conf配置文件。配置文件中还需要把cluster-enabled yes前的注释去掉。

 

3.3.4.启动每个redis实例

创建启动集群的脚本：start-all.sh 放在/usr/local/redis-cluster目录下。

cd redis-7001
./bin/redis-server bin/redis.conf
cd ..
cd redis-7002
./bin/redis-server bin/redis.conf
cd ..
cd redis-7003
./bin/redis-server bin/redis.conf
cd ..
cd redis-7004
./bin/redis-server bin/redis.conf
cd ..
cd redis-7005
./bin/redis-server bin/redis.conf
cd ..
cd redis-7006
./bin/redis-server bin/redis.conf
cd .. 
[root@localhost redis-cluster]# chmod 777 start-all.sh

创建关闭集群的脚本：shutdown-all.sh，放在/usr/local/redis-cluster目录下。

cd redis-7001
./redis7001/ bin/redis-cli -p 7001 shutdown
./redis7001/ bin/redis-cli -p 7002 shutdown
./redis7001/ bin/redis-cli -p 7003 shutdown
./redis7001/ bin/redis-cli -p 7004 shutdown
./redis7001/ bin/redis-cli -p 7005 shutdown
./redis7001/ bin/redis-cli -p 7006 shutdown
[root@localhost redis-cluster]# chmod 777shutdown-all.sh

3.3.5.使用ruby搭建集群

使用ruby脚本搭建redis集群

 cd /usr/upload/redis-3.0.0/src
./redis-trib.rb create --replicas 1 192.168.184.134:7001 192.168.184.134:7002 192.168.184.134:7003 192.168.184.134:7004 192.168.184.134:7005 192.168.184.134:7006

成功：

[root@localhost src]# ./redis-trib.rb create --replicas 1 192.168.25.153:7001 192.168.25.153:7002 192.168.25.153:7003 192.168.25.153:7004 192.168.25.153:7005  192.168.25.153:7006
>>> Creating cluster
Connecting to node 192.168.25.153:7001: OK
Connecting to node 192.168.25.153:7002: OK
Connecting to node 192.168.25.153:7003: OK
Connecting to node 192.168.25.153:7004: OK
Connecting to node 192.168.25.153:7005: OK
Connecting to node 192.168.25.153:7006: OK
>>> Performing hash slots allocation on 6 nodes...
Using 3 masters:
192.168.25.153:7001
192.168.25.153:7002
192.168.25.153:7003
Adding replica 192.168.25.153:7004 to 192.168.25.153:7001
Adding replica 192.168.25.153:7005 to 192.168.25.153:7002
Adding replica 192.168.25.153:7006 to 192.168.25.153:7003
M: 2e48ae301e9c32b04a7d4d92e15e98e78de8c1f3 192.168.25.153:7001
   slots:0-5460 (5461 slots) master
M: 8cd93a9a943b4ef851af6a03edd699a6061ace01 192.168.25.153:7002
   slots:5461-10922 (5462 slots) master
M: 2935007902d83f20b1253d7f43dae32aab9744e6 192.168.25.153:7003
   slots:10923-16383 (5461 slots) master
S: 74f9d9706f848471583929fc8bbde3c8e99e211b 192.168.25.153:7004
   replicates 2e48ae301e9c32b04a7d4d92e15e98e78de8c1f3
S: 42cc9e25ebb19dda92591364c1df4b3a518b795b 192.168.25.153:7005
   replicates 8cd93a9a943b4ef851af6a03edd699a6061ace01
S: 8b1b11d509d29659c2831e7a9f6469c060dfcd39 192.168.25.153:7006
   replicates 2935007902d83f20b1253d7f43dae32aab9744e6
Can I set the above configuration? (type 'yes' to accept): yes
>>> Nodes configuration updated
>>> Assign a different config epoch to each node
>>> Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join.....
>>> Performing Cluster Check (using node 192.168.25.153:7001)
M: 2e48ae301e9c32b04a7d4d92e15e98e78de8c1f3 192.168.25.153:7001
   slots:0-5460 (5461 slots) master
M: 8cd93a9a943b4ef851af6a03edd699a6061ace01 192.168.25.153:7002
   slots:5461-10922 (5462 slots) master
M: 2935007902d83f20b1253d7f43dae32aab9744e6 192.168.25.153:7003
   slots:10923-16383 (5461 slots) master
M: 74f9d9706f848471583929fc8bbde3c8e99e211b 192.168.25.153:7004
   slots: (0 slots) master
   replicates 2e48ae301e9c32b04a7d4d92e15e98e78de8c1f3
M: 42cc9e25ebb19dda92591364c1df4b3a518b795b 192.168.25.153:7005
   slots: (0 slots) master
   replicates 8cd93a9a943b4ef851af6a03edd699a6061ace01
M: 8b1b11d509d29659c2831e7a9f6469c060dfcd39 192.168.25.153:7006
   slots: (0 slots) master
   replicates 2935007902d83f20b1253d7f43dae32aab9744e6
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.
[root@localhost redis-cluster]#

3.3.6.测试

启动时使用-c参数来启动集群模式，命令如下：

./redis-cli -c -p 7001

 

3.3.7. redis cluster命令

cluster info   #打印集群的信息

cluster nodes  #列出集群当前已知的所有节点(node)，以及这些节点的相关信息 

 

一只小阿辉
关注
  • 0
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Redis集群模式搭建
01-20
最近学习springboot集成redis，因此本人打算在虚机上搭建一套redis集群 查阅相关资料，Redis集群中要求必须是奇数节点，所以至少要有三个节点。但是每个节点还需要一个备份节点，因此redis集群需要最低配置6个节点。 以下是本人在centos7上搭建redis集群的记录： 环境：centos7（条件有限，所以本人拟在一台服务器上搭建redis集群6个节点，以下依赖包为redis集群提供支持，本人搭建centos7时，安装的最纯净版，各种工具包和依赖包都没有，所以需要再安装一变。）            redis版本：redis-5.0.7.tar            gcc
Redis集群搭建
m0_71469568的博客
10-21 1917
redis集群搭建，一个服务器6个redis实例
九、Redis三种集群模式
热门推荐
sun_lm的博客
03-13 2万+
系统中只有一台redis服务器是不可靠的，容易出现单点故障。为了避免单点故障，可以使用多台redis服务器组成redis集群。redis支持三种集群模式。 一、主从模式 至少需要两台redis服务器，一台主节点（master）、一台从节点（slave），组成主从模式的Redis集群。通常来说，master主要负责写，slave主要负责读，主从模式实现了读写分离。 集群中有多台redis节点，就必须保证每个节点中的数据是一致的。redis中，为了保持数据一致性，数据总是从master复制到slave
redis分布式集群-redis+keepalived+ haproxy
weixin_43268590的博客
08-14 635
redis分布式集群架构（Redis+Keepalived+Haproxy）至少需要3台服务器、6个节点，一台服务器2个节点。 redis分布式集群架构中的每台服务器都使用六个端口来实现多路复用，最终实现主从热备、负载均衡、秒级切换的目标。 redis分布式集群架构思路为：keepalived给haproxy做高可用,当一台haproxy出现故障时,高可用会将另一台备用的haproxy作为master,继续给后端提供服务,防止单点故障。
redis集群的搭建
qq_46147786的博客
08-24 596
所有的redis节点彼此互联(PING-PONG机制)，节点的fail是通过集群中超过半数的节点检测失效时才生效
Redis高级特性解析：持久化、主从复制与哨兵机制全面探讨
最新发布
12-14
本文详细探讨了Redis的三大高级特性：持久化、主从复制和哨兵机制。首先，我们探讨了Redis的两种持久化方式：RDB和AOF。RDB通过定期生成数据快照来实现数据的持久化，而AOF则记录每个写操作，提供更强的数据安全性。...
Redis持久化以及集群部署
11-14
Redis持久化以及集群部署
Redis主从复制、持久化、哨兵
01-07
（一）Redis集群的主从复制 概念 主从备份，防止主机宕机 读写分离，分担master的任务 任务分离，如从服务节点分担备份与计算工作 主从复制特点 1：master 可以拥有多个 slave 2：多个 slave 可以连接同一个 master ...
redis持久化
05-26
1.大纲 1、Redis的持久化 2、Redis的主从 3、Redis的集群
Redis 高可用之”持久化”
01-07
在Redis中，实现高可用的技术主要包括：持久化、复制(读写分离)、哨兵、集群。 持久化： 持久化是最简单的高可用方法(有时甚至不被归为高可用手段)，主要作用是数据备份，即将数据存储在硬盘，保证数据不会因进程...
Kubernetes集群部署与实践
武天旭的博客
02-02 3326
部署Kubernetes集群至少需要3台服务器，其中至少要有1个服务器做master节点，至少要有1个服务器做node节点，且节点名称是唯一的。当集群中只有一个master节点时，如果其出现了故障，会导致Kubernetes的控制平面完全失效。如要保证Kubernetes集群的高可靠性，可以设置多个master，当其中部分master出现故障时，其他master还可以管理整个集群。
三台服务器使用docker搭建redis一主二从三哨兵，概念-搭建-整合springboot【保姆级】
小王博客基地
11-24 1797
redis在我们企业级开发中是很常见的，但是单个redis不能保证我们的稳定使用，所以我们要建立一个集群。High availability with Redis Sentinel（哨兵）Scaling with Redis Cluster（分片集群）第一个就是我们本次的要搭建的，就是高可用的哨兵，主redis挂掉，哨兵会进行投票进行故障转移！第二个就是分片集群，哨兵的一个缺点就是只能存在一个master节点，写的效率太低。分片集群就是解决哨兵的问题，可以水平扩展，提高redis的性能！
redis 集群二 · sentinel（哨兵）模式
疯飙的蜗牛
11-24 2400
Sentinel模式介绍 主从模式的弊端就是不具备高可用性，当master挂掉以后，Redis将不能再对外提供写入操作，因此sentinel应运而生。 sentinel中文含义为哨兵，顾名思义，它的作用就是监控redis集群的运行状况，特点如下： * sentinel模式是建立在主从模式的基础上，如果只有一个Redis节点，sentinel就没有任何意义 * 当master挂了以后，sentinel会在slave中选择一个做为master，并修改它们的配置文件，其他slave的配置文件也会被修改，比如s
Redis一主二从Sentinel监控配置
qq_37862114的博客
07-04 449
redis
redis 一般启动几个 哨兵_Redis Sentinel（哨兵）部署
weixin_32771631的博客
12-31 1178
Redis-sentinel是Redis实例的监控管理、通知和实例失效备援服务，是Redis集群的管理工具。在一般的分布式中心节点数据库中，Redis-sentinel的作用是中心节点的工作，监控各个其他节点的工作情况并且进行故障恢复，来提高集群的高可用性。一、Redis Sentinel规划IP端口号角色192.168.1.517000Redis Master192.168.1.527000Re...
ZooKeeper 集群最少要几台服务器，为什么？
dd2016124的博客
02-24 7983
集群规则为：2N + 1 台，N > 0，即最少需要 3 台。 因为 ZK 集群的机制是只要超过半数的节点正常，集群就能正常提供服务。 只有在 ZK 节点挂的太多，只剩一半或不到一半节点能工作，集群才失效。 如： 3 个节点的 cluster 可以挂掉一个节点（leader 可以得到 2 票 > 1.5） 2 个节点的 cluster 就不能挂掉任何一个节点了（leader 可以得到 1 票 <= 1） ...
redis集群
sda1_hacker的博客
05-14 1058
配置redis高可用集群：redis集群规定至少有3台master，因此最少需要6台redis主机。 1、环境准备： 通过一台管理主机（MGM）对redis集群进行管理，MGM可以在一台redis服务器上，也可以是单独的主机。 client：192.168.4.50 MGM：192.168.4.100 A：192.168.4.51，redis端口6351 B：192.168.4.52，redis...
Redis数据库（四）哨兵和集群
sjc090132的博客
10-11 1930
redis3中高可用
redis 持久化 面试问题
06-09
可以，Redis 的持久化可以在运行时进行配置和切换，例如可以在运行时从 RDB 切换到 AOF 持久化，或者从 AOF 切换到 RDB 持久化。 5. Redis 的持久化会对性能产生影响吗？ 会，Redis 的持久化会增加磁盘 I/O 开销，...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值