05. Redis架构-主从

最新推荐文章于 2024-10-24 09:53:02 发布
最新推荐文章于 2024-10-24 09:53:02 发布
阅读量835 收藏 8
点赞数 19
分类专栏： Redis 文章标签： redis
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_40901913/article/details/136729307
版权
本文详细介绍了Redis主从复制架构的工作原理，包括数据流向、角色分工（master的写入和slave的只读），以及如何规划、配置和验证主从关系，还涉及了故障处理和多从节点的扩展方法。
摘要由CSDN通过智能技术生成

简介

主从架构

在Redis主从复制架构中，通过定义主库（master）和从库（slave）的角色，实现数据的高效同步和备份

主从架构特点

  1. master的读写能力：

master是主从架构的数据中心，承担了所有的写入操作，也能处理读请求。
当master上执行任何改变数据的操作时，这些改动会自动同步到slave上。

  1. 单向数据流：

数据同步是单向的，数据只能从master同步到slave。
确保了数据同步的一致性和可靠性。

  1. slave的只读特性：

slave通常被配置为只读模式，slave接受并存储来着master的数据。
分散了Redis的读取压力，从而提高了主从架构的整体读取性能。

  1. 主slave的对应关系：

一个master可以对应多个slave，可以实现数据的冗余备份和读取压力的分散。
一个slave只能对应一个master，确保数据同步的一致性。

  1. slave的容错性：

如果某个slave出现故障，这个slave对Redis主从集群影响是非常小的。
一台slave出现故障，其他slave仍然可以提供读服务，master也能保证数据的正常写入操作。
当故障的slave恢复以后，它会从master自动同步丢失的数据。

  1. master故障的影响：

master故障会导致Redis暂时无法处理新的写入请求，但slave仍可以提供读取服务。
故障的master恢复以后Redis会重新提供完整的读写服务。

  1. master故障应对机制：

master发送故障时，主从集群中不会自动选举一个slave作为master。
可以使用集群模式或哨兵模式实现主节点的故障冗余。

主从复制原理

  1. 从库向主库发送sync命令，也就是从库向主库发送同步请求；
  2. 当主库接受到sync命令后，会执行bgsave命令保存此刻主库的快照；
  3. 创建的RDB文件期间主库上的执行命令会保存到缓冲区；
  4. 当主库执行bgsave以后，会向从库发送RDB文件；
  5. 从库接受RDB文件以后加载文件；
  6. 主库将缓冲区的所有写命令发送给从库执行；
  7. 至此Redis主从建立成功，之后主库每写一个命令都会传到从库上执行。

实现

一主一从

规划Redis

  • 主机规划
    | 主机名称 | 主机地址 | 主机规划 |
    | — | — | — |
    | redis-master | 192.168.108.129 | master主机 |
    | redis-slave | 192.168.108.130 | slave主机 |

  • 目录规划
    | 用途 | 目录 | 备注 |
    | — | — | — |
    | 家目录 | /usr/local/redis/ | |
    | 解压目录 | /usr/local/ | |
    | 日志目录 | /usr/local/redis/logs/ | |
    | 数据目录 | /usr/local/redis/data/ | |
    | 配置目录 | /usr/local/redis/conf/ | |
    | PID目录 | /usr/local/redis/pid/ | |

  • 检查主机

#检查防火墙
systemctl status firewalld
systemctl stop firewalld
systemctl disable firewalld
  • 拓扑图

安装Redis

涉及主机：redis-master和redis-slave

#解决依赖关系
yum -y install wget gcc gcc-c++ make automake autoconf libtool libc

#下载Redis
wget http://download.redis.io/releases/redis-3.2.9.tar.gz

#解压Redis
tar -zxvf redis-3.2.9.tar.gz -C /usr/local/

#重命名Redis文件
mv /usr/local/redis-3.2.9 /usr/local/redis

#安装Redis
cd /usr/local/redis
make
make PREFIX=/usr/local/redis MALLOC=libc install

#创建目录和用户
useradd redis
mkdir -p /usr/local/redis/{data,conf,logs,pid}
chown -R redis:redis /usr/local/redis/

#复制配置文件
cp /usr/local/redis/redis.conf /usr/local/redis/conf/

#命令加载至profile
cat >> /etc/profile << 'EOF'
export PATH=$PATH:/usr/local/redis/bin/
EOF

source /etc/profile

配置Redis

  • redis-master和redis-slave
cat > /usr/local/redis/conf/redis.conf << EOF
bind 0.0.0.0
port 6379
requirepass 1qaz!QAZ
protected-mode yes
timeout 0
databases 16
daemonize yes
pidfile /usr/local/redis/pid/redis_6379.pid
loglevel notice
logfile "/usr/local/redis/logs/redis.log"

#数据保存路径
dir /usr/local/redis/data/

#备份策略
save 900 1
save 300 10
save 60 10000

#备份文件名称
dbfilename dump.rdb
EOF

主从复制

命令实现
  • slave
192.168.108.130:6379> slaveof 192.168.108.129 6379
OK
  • 主动退出slave
192.168.108.130:6379> SLAVEOF no one
OK
配置实现
  • slave
cat >> /usr/local/redis/conf/redis.conf << EOF
##添加主库信息
#主库地址和端口
slaveof 192.168.108.129 6379
#主库密码
masterauth 1qaz!QAZ
EOF

验证Redis

  • 启动Redis
redis-server /usr/local/redis/conf/redis.conf
  • 查看slave信息
192.168.108.130:6379> AUTH 1qaz!QAZ
OK
192.168.108.130:6379> info replication
# Replication
role:slave
master_host:192.168.108.129
master_port:6379
master_link_status:up
master_last_io_seconds_ago:3
master_sync_in_progress:0
slave_repl_offset:302
slave_priority:100
slave_read_only:1
connected_slaves:0
master_repl_offset:0
repl_backlog_active:0
repl_backlog_size:1048576
repl_backlog_first_byte_offset:0
repl_backlog_histlen:0
  • 查看master信息
192.168.108.129:6379> AUTH 1qaz!QAZ
OK
192.168.108.129:6379> info replication
# Replication
role:master
connected_slaves:1
slave0:ip=192.168.108.130,port=6379,state=online,offset=344,lag=1
master_repl_offset:344
repl_backlog_active:1
repl_backlog_size:1048576
repl_backlog_first_byte_offset:2
repl_backlog_histlen:343
  • 验证读写
#从库写入
192.168.108.130:6379> set age 18
(error) READONLY You can't write against a read only slave.

#主库写入
192.168.108.129:6379> set age 18
OK

#从库查询
192.168.108.130:6379> get age
"18"

一主多从

规划Redis

  • 主机规划
    | 主机名称 | 主机地址 | 主机规划 |
    | — | — | — |
    | redis-master | 192.168.108.129 | master主机 |
    | redis-slave-1 | 192.168.108.130 | slave主机 |
    | redis-slave-2 | 192.168.108.131 | slave主机 |

  • 目录规划
    | 用途 | 目录 | 备注 |
    | — | — | — |
    | 家目录 | /usr/local/redis/ | |
    | 解压目录 | /usr/local/ | |
    | 日志目录 | /usr/local/redis/logs/ | |
    | 数据目录 | /usr/local/redis/data/ | |
    | 配置目录 | /usr/local/redis/conf/ | |
    | PID目录 | /usr/local/redis/pid/ | |

  • 检查主机

#检查防火墙
systemctl status firewalld
systemctl stop firewalld
systemctl disable firewalld
  • 拓扑图

安装Redis

涉及主机：redis-master和redis-slave

#解决依赖关系
yum -y install wget gcc gcc-c++ make automake autoconf libtool libc

#下载Redis
wget http://download.redis.io/releases/redis-3.2.9.tar.gz

#解压Redis
tar -zxvf redis-3.2.9.tar.gz -C /usr/local/

#重命名Redis文件
mv /usr/local/redis-3.2.9 /usr/local/redis

#安装Redis
cd /usr/local/redis
make
make PREFIX=/usr/local/redis MALLOC=libc install

#创建目录和用户
useradd redis
mkdir -p /usr/local/redis/{data,conf,logs,pid}
chown -R redis:redis /usr/local/redis/

#复制配置文件
cp /usr/local/redis/redis.conf /usr/local/redis/conf/

#命令加载至profile
cat >> /etc/profile << 'EOF'
export PATH=$PATH:/usr/local/redis/bin/
EOF

source /etc/profile

配置Redis

  • redis-master和redis-slave
cat > /usr/local/redis/conf/redis.conf << EOF
bind 0.0.0.0
port 6379
requirepass 1qaz!QAZ
protected-mode yes
timeout 0
databases 16
daemonize yes
pidfile /usr/local/redis/pid/redis_6379.pid
loglevel notice
logfile "/usr/local/redis/logs/redis.log"

#数据保存路径
dir /usr/local/redis/data/

#备份策略
save 900 1
save 300 10
save 60 10000

#备份文件名称
dbfilename dump.rdb
EOF

主从复制

命令实现
  • slave
192.168.108.130:6379> slaveof 192.168.108.129 6379
OK
  • 主动退出slave
192.168.108.130:6379> SLAVEOF no one
OK
配置实现
  • slave

从节点扩容便利，只需要添加主库信息，重启redis即可。

cat >> /usr/local/redis/conf/redis.conf << EOF
##添加主库信息
#主库地址和端口
slaveof 192.168.108.129 6379
#主库密码
masterauth 1qaz!QAZ
EOF

验证Redis

  • 启动Redis
redis-server /usr/local/redis/conf/redis.conf
  • 查看redis-slave-1信息
192.168.108.130:6379> AUTH 1qaz!QAZ
OK
192.168.108.130:6379> info replication
# Replication
role:slave
master_host:192.168.108.129
master_port:6379
master_link_status:up
master_last_io_seconds_ago:3
master_sync_in_progress:0
slave_repl_offset:302
slave_priority:100
slave_read_only:1
connected_slaves:0
master_repl_offset:0
repl_backlog_active:0
repl_backlog_size:1048576
repl_backlog_first_byte_offset:0
repl_backlog_histlen:0
  • 查看redis-slave-2信息
192.168.108.131:6379> INFO replication
# Replication
role:slave
master_host:192.168.108.129
master_port:6379
master_link_status:up
master_last_io_seconds_ago:7
master_sync_in_progress:0
slave_repl_offset:883
slave_priority:100
slave_read_only:1
connected_slaves:0
master_repl_offset:0
repl_backlog_active:0
repl_backlog_size:1048576
repl_backlog_first_byte_offset:0
repl_backlog_histlen:0
  • 查看master信息
192.168.108.129:6379> AUTH 1qaz!QAZ
OK
192.168.108.129:6379> info replication
# Replication
role:master
connected_slaves:1
slave0:ip=192.168.108.130,port=6379,state=online,offset=344,lag=1
master_repl_offset:344
repl_backlog_active:1
repl_backlog_size:1048576
repl_backlog_first_byte_offset:2
repl_backlog_histlen:343
  • 验证读写
#从库写入
192.168.108.130:6379> set age 18
(error) READONLY You can't write against a read only slave.

192.168.108.131:6379> set age 18
(error) READONLY You can't write against a read only slave.

#主库写入
192.168.108.129:6379> set age 18
OK

#从库查询
192.168.108.130:6379> get age
"18"

192.168.108.131:6379> get age
"18"
王茗渠
关注
专栏目录
Redis部署-主从模式
m0_62360856的博客
12-01 919
redis部署-主从复制
分布式Redis集群--主从架构
qq_44528357的博客
11-11 648
Redis主从架构原理与部署
Redis集群架构----主从复制
weixin_40413961的博客
03-13 4608
上次我们看了CAP定理，以及CP，AP架构的原则，这篇文章主要聊下redis的几种集群架构方式。以及对应的架构原则。 主从理解 对于任何一个服务我们都在讲高可用，如果对于一个单机服务如果挂掉了那岂不是就GG了。那我们为了让服务available那就进行多起几个服务进行数据冗余，达到挂掉一个还有一个顶着。但是在保存的数据的时候会有很多的麻烦事，写数据的一致性问题，当给每台机器都进行写数据的时候且各个节点之间的数据是互相同步的，这个时候就遇到了并发安全问题，通过各种加锁同步操作会对整个服务的性能严重下降，这也就
redis集群之主从架构
weixin_45476104的博客
04-14 887
什么是Redis集群?Redis集群是一种通过将多个Redis节点连接在一起以实现高可用性、数据分片和负载均衡的技术。它允许Redis在不同的服务器节点上同时提供服务，提高整体性能和可靠性。根据搭建的方式和集群的特性，Redis集群主要有三种模式：主从复制模式（Master-Slave）、哨兵模式（Sentinel）和Cluster模式。本文将首先介绍主从复制架构模式本文主要讲解了主从复制之间的复制原理，分为：全量复制和部分复制。
Redis笔记 --主从复制
qq_41644234的博客
03-17 1017
Redis笔记 --主从复制Redis主从复制1.主从同步1.1.概念1.2 原理1.2.1 全量同步1.2.2 增量同步1.2.3 Redis主从同步策略1.3特点1.4演示1.4.1准备工作1.4.2 启动服务1.4.3测试1.5 缺点2.哨兵模式2.1 特点2.2 工作机制3.Cluster模式3.1Cluster模式介绍3.2实现原理3.3 特点4.应用场景 Redis主从复制 通过持久化功能，Redis保证了即使在服务器重启的情况下也不会丢失（或少量丢失）数据，但是由于数据是存储在一台服务器上的
Redis-主从集群
weixin_64133130的博客
09-07 1270
因为slave原本也是一个master，有自己的replid和offset，（宕机重启后）当第一次变成slave，与master建立连接时，发送的replid和offset是自己的replid和offset。如果slave的offset小于master的offset，说明slave数据落后于master，需要更新。如果master继续写入新数据，其offset就会覆盖旧的数据，直到将slave现在的offset也覆盖，注意此时master已经覆盖了从节点尚未同步过去的数据，这就出现了主从之间数据的不一致。
Redis-主从模式
tq02的博客
07-25 2185
Redis的主从节点之间的关系，以及复制方式
redis--主从复制
weixin_43903745的博客
08-20 997
Redis 主从复制是一种用于实现数据复制和数据备份的机制，它允许将一个 Redis 服务器的数据复制到其他 Redis 服务器上。主从复制在 Redis 中通常用于构建高可用性架构、读写分离以及数据分析等场景。
Redis--主从模式搭建及数据同步原理
CJPSR的博客
07-28 459
本文的内容讲的是Redis主从模式的搭建以及主从数据同步的原理及优化。
Redis-x64-5.0.14.1 缓存程序
09-01
4. **主从复制**：通过主从复制，可以实现数据备份和负载均衡。主节点负责写操作，从节点同步主节点的数据，读操作可分散到从节点，提高系统性能。 5. **事务**：Redis支持事务，用户可以一次性执行多个操作，保证...
redis64-3.0.501.rar
06-16
3. 主从复制：Redis支持主从复制，可以创建多个从节点，以实现数据备份和负载均衡。当主节点发生故障时，可以手动或自动切换到从节点，保证服务连续性。 4. 哨兵系统（Sentinel）：哨兵是Redis提供的高可用性解决...
redis-windows-7.2.5.zip
05-20
- **复制**：Redis支持主从复制，可以创建多个副本节点，提高数据可用性和读取性能。 - **事务**：Redis提供了简单的事务功能，允许一组操作原子性地执行。 - **发布/订阅**：Redis的pub/sub机制允许实现消息传递...
深入学习 Redis - 主从结构配置、流程、底层原理（全网最详细）
CYK_byte的博客
08-11 8951
单点问题可用性：如果这个机器挂了，意味着服务就中断了.性能：支持的并发量也是比较有限的.因此引入分布式系统，主要也是为了解决上述的单点问题~ 分布式系统中，往往需要多个服务器来部署 redis 服务，从而构成redis 集群，此时就可以让这个集群给整个分布式系统中的其他服务，提供更稳定 / 更高效的数据存储功能.本章主要来讲一下 redis 部署方式中的主从模式~
redis启动报错/var/run/redis_6379.pid exists, process is already running or crashed
Carrot_ly的博客
10-23 301
在centos系统中redis自启失败，使用systemctl start redis手动启动时报错/var/run/redis_6379.pid exists, process is already running or crashed。
Redis通信协议
kimdaydayup的博客
10-23 499
但目前，默认使用的依然是RESP2协议，也是我们要学习的协议版本（以下简称RESP）。因此客户端发送命令的格式、服务端响应结果的格式必须有一个规范，这个规范就是通信协议。
使用docker-compose部署一个springboot项目(包含Postgres\redis\Mongo\Nginx等环境)
最新发布
洛阳泰山的博客
10-24 150
这是所有服务的开始标签，每个服务都是一个独立运行的应用程序或数据库实例。ports:networks:- mongo- postgres- redisimage: 使用的镜像是。: 容器启动后，其名称将设置为。ports: 将容器内的端口12000映射到宿主机的端口12000。networks: 容器将连接到名为的网络。depends_on: 指定了依赖的服务列表，这些服务在启动之前会被先启动。restart: 设置为always。
redis报错(error) NOAUTH Authentication required.
橙-极纪元-cplvfx-JJY.Cheng
10-22 257
redis报错(error) NOAUTH Authentication required.
Redis3
m0_48362854的博客
10-22 520
单节点的redis并发能力是有上限的 要进一步提高redis的并发能力 可以搭建主从集群 实现读写分离 其中主节点负责写数据 而从节点负责读数据 然后主节点写入数据之后 需要把数据同步到节点中。
配置教程：Keepalived实现Redis高可用主从架构
在构建高可用的Redis集群时，Keepalived是一个常用工具，它与Redis主从架构结合可以实现故障切换和负载均衡，确保服务的不间断和高效运行。以下是关于Keepalived和Redis主从配置的详细解释： 1. **Keepalived介绍**...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值