Redis 群集详解

目录

一，Redis群集概念

二，Redis主从复制

1，Redis主从复制的概念

2，Redis主从复制的搭建

三，哨兵模式

1，哨兵模式的原理

2，哨兵模式的作用和组成

3，哨兵模式的故障转移机制

4，哨兵模式的搭建

四，Redis集群

1，Redis集群基础

2，Redis Cluster的工作原理

3，Redis集群的基本架构

4，搭建Redis集群

---

一，Redis群集概念

虽然Redis可以实现单机的数据持久化，但无论是RDB也好或者AOF也好，都解决不了单点宕机问题，即一旦单台 redis服务器本身出现系统故障、硬件故障等问题后，就会直接造成数据的丢失，此外单机的性能也是有极限的,因此需要使用另外的技术来解决单点故障和性能扩展的问题

1. 主从复制:主从复制是高可用Redis的基础，哨兵和集群都是在主从复制基础上实现高可用的。主从复制主要实现了数据的多机备份，以及对于读操作的负载均衡和简单的故障恢复。缺陷:故障恢复无法自动化;写操作无法负载均衡;存储能力受到单机的限制。

2. 哨兵:在主从复制的基础上，哨兵实现了自动化的故障恢复。缺陷:写操作无法负载均衡:存储能力受到单机的限制;哨兵无法对从节点进行自动故障转移，在读写分离场景下，从节点故障会导致读服务不可用，需要对从节点做额外的监控、切换操作。

3. 集群:通过集群，Redis解决了写操作无法负载均衡，以及存储能力受到单机限制的问题，实现了较为完善的高可用方案。

二，Redis主从复制

1，Redis主从复制的概念

主从复制，是指将一台redis服务器的数据，复制到其他的redis服务器。前者称为主节点（master），后者称为从节点（slave）；数据复制是单向的，只能由主节点到从节点。

默认情况下，每台redis服务器都是主节点；且一个主节点可以有多个从节点（或者没有从节点），但是每一个从节点只能有一个主节点。

Redis只从复制的作用

• 数据冗余:主从复制实现了数据的热备份，是持久化之外的一种数据冗余方式。

• 故障恢复:当主节点出现问题时，可以由从节点提供服务，实现快速的故障恢复;实际上是一种服务的冗余。

• 负载均衡:在主从复制的基础.上，配合读写分离，可以让主节点提供写服务，由从节点提供读服务〈即写Redis数据时应用连接主节点，读Redis数据时应用连接从节点)，分担服务器负载;尤其是在写少读多的场景下，通过多个从节点分担读负载，可以大大提高Redis服务器的并发量。

• 高可用基石:除了上述作用以外，主从复制还是哨兵和集群能够实施的基础,因此说主从复制是Redis高可用的基础。

Redis只从复制的流程

1. 若启动一个Slave机器，则它会向Master机器发送一个"sync command"命令，请求同步连接。从发给主

2. 无论是第一次连接还是重新连接，Master机器都会启动一个后台进程，将数据快照保存到数据文件中（执行rdb操作），同时Master还会记录修改数据的所有命令并缓存在数据文件中。

3. 后台进程完成缓存操作之后，Master机器就会向Slave机器发送数据文件存储，接着Master机器就会将修改数据的所有操作一并发送给Slave端机器。若slave出现故障导致宕机，则恢复正常后会自动重新连接。

4. Master机器收到Slave端机器的连接后，将其完整的数据文件发送给slave端机器，如果Master同时收到多个slave发来的同步请求，则Master会在后台启动一个进程以保存数据文件，然后将其发送给所有的Slave端机器，确保所有的Slave端机器都正常。

2，Redis主从复制的搭建

1，环境设定

master节点：192.168.18.100     安装Redis

slaves1节点：192.168.18.109    安装Redis

slaves1节点：192.168.18.90       安装Redis

2，安装Redis（三台服务器操作一致）

关闭防火墙和selinux

[root@localhost ~]# systemctl stop firewalld.service 
[root@localhost ~]# setenforce 0

安装环境依赖包

[root@localhost ~]# yum install -y gcc gcc-c++ make
已加载插件：fastestmirror, langpacks
Loading mirror speeds from cached hostfile
................
正在尝试其它镜像。
软件包 gcc-4.8.5-44.el7.x86_64 已安装并且是最新版本
软件包 gcc-c++-4.8.5-44.el7.x86_64 已安装并且是最新版本
软件包 1:make-3.82-24.el7.x86_64 已安装并且是最新版本
无须任何处理

将安装包上传到/opt目录下解压

[root@localhost opt]# rz -E
rz waiting to receive.
[root@localhost opt]# tar zxf redis-5.0.7.tar.gz -C /opt/
[root@localhost opt]# ls
mysql-5.7.20               redis-5.0.7         rh
mysql-boost-5.7.20.tar.gz  redis-5.0.7.tar.gz

由于Redis源码包中直接提供了Makefile 文件，所以在解压完软件包后，不用先执行./configure 进行配置，可直接执行make与make install命令进行安装

切换目录安装

[root@localhost opt]# cd redis-5.0.7/
[root@localhost redis-5.0.7]# make
cd src && make all
make[1]: 进入目录“/opt/redis-5.0.7/src”
    CC Makefile.dep
make[1]: 离开目录“/opt/redis-5.0.7/src”
...........
  CC lolwut.o
    CC lolwut5.o
    LINK redis-server
    INSTALL redis-sentinel
    CC redis-cli.o
    LINK redis-cli
    CC redis-benchmark.o
    LINK redis-benchmark
    INSTALL redis-check-rdb
    INSTALL redis-check-aof

Hint: It's a good idea to run 'make test' ;)

make[1]: 离开目录“/opt/redis-5.0.7/src”

指定目录安装

[root@localhost redis-5.0.7]# make PREFIX=/usr/local/redis install
cd src && make install
make[1]: 进入目录“/opt/redis-5.0.7/src”
    CC Makefile.dep
..............

    INSTALL install
    INSTALL install
    INSTALL install
    INSTALL install
    INSTALL install
make[1]: 离开目录“/opt/redis-5.0.7/src”

执行软件包提供的 install_server.sh 脚本文件设置Redis服务所需要的相关配置文件

[root@localhost utils]# ./install_server.sh
Welcome to the redis service installer
This script will help you easily set up a running redis server

Please select the redis port for this instance: [6379]      ##回车
Selecting default: 6379
Please select the redis config file name [/etc/redis/6379.conf] ##回车
Selected default - /etc/redis/6379.conf
Please select the redis log file name [/var/log/redis_6379.log] ##回车
Selected default - /var/log/redis_6379.log
Please select the data directory for this instance [/var/lib/redis/6379] ##回车
Selected default - /var/lib/redis/6379
Please select the redis executable path [] /usr/local/redis/bin/redis-server
                                            #####输入路径
..........
Installing service...
Successfully added to chkconfig!
Successfully added to runlevels 345!
Starting Redis server...
Installation successful!    ###安装完成

添加软链接把redis的可执行程序文件放入路径环境变量的目录中便于系统识别

[root@localhost utils]# ln -s /usr/local/redis/bin/* /usr/local/bin/

查看服务是否开启

[root@localhost utils]# ss -natp|grep 6379
LISTEN     0      128    127.0.0.1:6379                     *:*    
               users:(("redis-server",pid=7634,fd=6))  ##已开启

主服务配置（192.168.18.100）

[root@localhost redis-5.0.7]# vim /etc/redis/6379.conf
.....
 70 bind 0.0.0.0    ##70行监听任意端口
  71 
  72 # Protected mode is a layer of security protection, in order to avoid th     at
.....
137 daemonize yes  ##137行开启守护进程
 138 
 139 # If you run Redis from upstart or systemd, Redis can interact with your
 140 # supervision tree. Options:
700 appendonly yes    ##700行开启aof持久化
 701 
 702 # The name of the append only file (default: "appendonly.aof")

重启服务查看

[root@localhost utils]# /etc/init.d/redis_6379 restart
Stopping ...
Waiting for Redis to shutdown ...
Redis stopped
Starting Redis server...
[root@localhost utils]# ss -natp |grep redis
LISTEN     0      128          *:6379                     *:*         
          users:(("redis-server",pid=59607,fd=6))

从节点配置（两台配置相同）

[root@localhost redis-5.0.7]# vim /etc/redis/6379.conf 
.........
70 bind 0.0.0.0   ##70行监听任意端口
  71 
  72 # Protected mode is a layer of security protection, in order to      avoid that
...........
137 daemonize yes ##开启守护进程
 138 
 139 # If you run Redis from upstart or systemd, Redis can interact w     ith your
.........
288  replicaof 192.168.18.100 6379   ###指定主节点ip和端口
........
700 appendonly yes    ##开启AOF持久化
 701 
 702 # The name of the append only file (default: "appendonly.aof")
 703 
 704 appendfilename "appendonly.aof"

重启服务查看

[root@localhost utils]# /etc/init.d/redis_6379 restart
Stopping ...
Waiting for Redis to shutdown ...
Redis stopped
Starting Redis server...
[root@localhost utils]# ss -natp|grep redis
LISTEN     0      128          *:6379                     *:*               
    users:(("redis-server",pid=7748,fd=6))
ESTAB      0      0      192.168.18.90:34378              192.168.18.100:6379 
               users:(("redis-server",pid=7748,fd=8))

验证主从复制

在主服务器上查看

[root@localhost utils]# redis-cli info replication
# Replication
role:master
connected_slaves:2
slave0:ip=192.168.18.109,port=6379,state=online,offset=294,lag=1
slave1:ip=192.168.18.90,port=6379,state=online,offset=294,lag=1
master_replid:73751c89704f3befcc59f1709b45fd6e7c6adf3b
master_replid2:0000000000000000000000000000000000000000
master_repl_offset:294
second_repl_offset:-1
repl_backlog_active:1
repl_backlog_size:1048576
repl_backlog_first_byte_offset:1
repl_backlog_histlen:294

在主服务器上创建文件

[root@localhost utils]# vim redis.sh   ##利用脚本多个创建
#!/bin/bash
num=100
for i in `seq $num`
do
redi