目录
一,Redis群集概念
虽然Redis可以实现单机的数据持久化,但无论是RDB也好或者AOF也好,都解决不了单点宕机问题,即一旦单台 redis服务器本身出现系统故障、硬件故障等问题后,就会直接造成数据的丢失,此外单机的性能也是有极限的,因此需要使用另外的技术来解决单点故障和性能扩展的问题
主从复制:主从复制是高可用Redis的基础,哨兵和集群都是在主从复制基础上实现高可用的。主从复制主要实现了数据的多机备份,以及对于读操作的负载均衡和简单的故障恢复。缺陷:故障恢复无法自动化;写操作无法负载均衡;存储能力受到单机的限制。
哨兵:在主从复制的基础上,哨兵实现了自动化的故障恢复。缺陷:写操作无法负载均衡:存储能力受到单机的限制;哨兵无法对从节点进行自动故障转移,在读写分离场景下,从节点故障会导致读服务不可用,需要对从节点做额外的监控、切换操作。
集群:通过集群,Redis解决了写操作无法负载均衡,以及存储能力受到单机限制的问题,实现了较为完善的高可用方案。
二,Redis主从复制
1,Redis主从复制的概念
主从复制,是指将一台redis服务器的数据,复制到其他的redis服务器。前者称为主节点(master),后者称为从节点(slave);数据复制是单向的,只能由主节点到从节点。
默认情况下,每台redis服务器都是主节点;且一个主节点可以有多个从节点(或者没有从节点),但是每一个从节点只能有一个主节点。
Redis只从复制的作用
数据冗余:主从复制实现了数据的热备份,是持久化之外的一种数据冗余方式。
故障恢复:当主节点出现问题时,可以由从节点提供服务,实现快速的故障恢复;实际上是一种服务的冗余。
负载均衡:在主从复制的基础.上,配合读写分离,可以让主节点提供写服务,由从节点提供读服务〈即写Redis数据时应用连接主节点,读Redis数据时应用连接从节点),分担服务器负载;尤其是在写少读多的场景下,通过多个从节点分担读负载,可以大大提高Redis服务器的并发量。
高可用基石:除了上述作用以外,主从复制还是哨兵和集群能够实施的基础,因此说主从复制是Redis高可用的基础。
Redis只从复制的流程
若启动一个Slave机器,则它会向Master机器发送一个"sync command"命令,请求同步连接。从发给主
无论是第一次连接还是重新连接,Master机器都会启动一个后台进程,将数据快照保存到数据文件中(执行rdb操作),同时Master还会记录修改数据的所有命令并缓存在数据文件中。
后台进程完成缓存操作之后,Master机器就会向Slave机器发送数据文件存储,接着Master机器就会将修改数据的所有操作一并发送给Slave端机器。若slave出现故障导致宕机,则恢复正常后会自动重新连接。
Master机器收到Slave端机器的连接后,将其完整的数据文件发送给slave端机器,如果Master同时收到多个slave发来的同步请求,则Master会在后台启动一个进程以保存数据文件,然后将其发送给所有的Slave端机器,确保所有的Slave端机器都正常。
2,Redis主从复制的搭建
1,环境设定
master节点:192.168.18.100 安装Redis
slaves1节点:192.168.18.109 安装Redis
slaves1节点:192.168.18.90 安装Redis
2,安装Redis(三台服务器操作一致)
关闭防火墙和selinux
[root@localhost ~]# systemctl stop firewalld.service
[root@localhost ~]# setenforce 0
安装环境依赖包
[root@localhost ~]# yum install -y gcc gcc-c++ make
已加载插件:fastestmirror, langpacks
Loading mirror speeds from cached hostfile
................
正在尝试其它镜像。
软件包 gcc-4.8.5-44.el7.x86_64 已安装并且是最新版本
软件包 gcc-c++-4.8.5-44.el7.x86_64 已安装并且是最新版本
软件包 1:make-3.82-24.el7.x86_64 已安装并且是最新版本
无须任何处理
将安装包上传到/opt目录下解压
[root@localhost opt]# rz -E
rz waiting to receive.
[root@localhost opt]# tar zxf redis-5.0.7.tar.gz -C /opt/
[root@localhost opt]# ls
mysql-5.7.20 redis-5.0.7 rh
mysql-boost-5.7.20.tar.gz redis-5.0.7.tar.gz
由于Redis源码包中直接提供了Makefile 文件,所以在解压完软件包后,不用先执行./configure 进行配置,可直接执行make与make install命令进行安装
切换目录安装
[root@localhost opt]# cd redis-5.0.7/
[root@localhost redis-5.0.7]# make
cd src && make all
make[1]: 进入目录“/opt/redis-5.0.7/src”
CC Makefile.dep
make[1]: 离开目录“/opt/redis-5.0.7/src”
...........
CC lolwut.o
CC lolwut5.o
LINK redis-server
INSTALL redis-sentinel
CC redis-cli.o
LINK redis-cli
CC redis-benchmark.o
LINK redis-benchmark
INSTALL redis-check-rdb
INSTALL redis-check-aof
Hint: It's a good idea to run 'make test' ;)
make[1]: 离开目录“/opt/redis-5.0.7/src”
指定目录安装
[root@localhost redis-5.0.7]# make PREFIX=/usr/local/redis install
cd src && make install
make[1]: 进入目录“/opt/redis-5.0.7/src”
CC Makefile.dep
..............
INSTALL install
INSTALL install
INSTALL install
INSTALL install
INSTALL install
make[1]: 离开目录“/opt/redis-5.0.7/src”
执行软件包提供的 install_server.sh 脚本文件设置Redis服务所需要的相关配置文件
[root@localhost utils]# ./install_server.sh
Welcome to the redis service installer
This script will help you easily set up a running redis server
Please select the redis port for this instance: [6379] ##回车
Selecting default: 6379
Please select the redis config file name [/etc/redis/6379.conf] ##回车
Selected default - /etc/redis/6379.conf
Please select the redis log file name [/var/log/redis_6379.log] ##回车
Selected default - /var/log/redis_6379.log
Please select the data directory for this instance [/var/lib/redis/6379] ##回车
Selected default - /var/lib/redis/6379
Please select the redis executable path [] /usr/local/redis/bin/redis-server
#####输入路径
..........
Installing service...
Successfully added to chkconfig!
Successfully added to runlevels 345!
Starting Redis server...
Installation successful! ###安装完成
添加软链接把redis的可执行程序文件放入路径环境变量的目录中便于系统识别
[root@localhost utils]# ln -s /usr/local/redis/bin/* /usr/local/bin/
查看服务是否开启
[root@localhost utils]# ss -natp|grep 6379
LISTEN 0 128 127.0.0.1:6379 *:*
users:(("redis-server",pid=7634,fd=6)) ##已开启
主服务配置(192.168.18.100)
[root@localhost redis-5.0.7]# vim /etc/redis/6379.conf
.....
70 bind 0.0.0.0 ##70行监听任意端口
71
72 # Protected mode is a layer of security protection, in order to avoid th at
.....
137 daemonize yes ##137行开启守护进程
138
139 # If you run Redis from upstart or systemd, Redis can interact with your
140 # supervision tree. Options:
700 appendonly yes ##700行开启aof持久化
701
702 # The name of the append only file (default: "appendonly.aof")
重启服务查看
[root@localhost utils]# /etc/init.d/redis_6379 restart
Stopping ...
Waiting for Redis to shutdown ...
Redis stopped
Starting Redis server...
[root@localhost utils]# ss -natp |grep redis
LISTEN 0 128 *:6379 *:*
users:(("redis-server",pid=59607,fd=6))
从节点配置(两台配置相同)
[root@localhost redis-5.0.7]# vim /etc/redis/6379.conf
.........
70 bind 0.0.0.0 ##70行监听任意端口
71
72 # Protected mode is a layer of security protection, in order to avoid that
...........
137 daemonize yes ##开启守护进程
138
139 # If you run Redis from upstart or systemd, Redis can interact w ith your
.........
288 replicaof 192.168.18.100 6379 ###指定主节点ip和端口
........
700 appendonly yes ##开启AOF持久化
701
702 # The name of the append only file (default: "appendonly.aof")
703
704 appendfilename "appendonly.aof"
重启服务查看
[root@localhost utils]# /etc/init.d/redis_6379 restart
Stopping ...
Waiting for Redis to shutdown ...
Redis stopped
Starting Redis server...
[root@localhost utils]# ss -natp|grep redis
LISTEN 0 128 *:6379 *:*
users:(("redis-server",pid=7748,fd=6))
ESTAB 0 0 192.168.18.90:34378 192.168.18.100:6379
users:(("redis-server",pid=7748,fd=8))
验证主从复制
在主服务器上查看
[root@localhost utils]# redis-cli info replication
# Replication
role:master
connected_slaves:2
slave0:ip=192.168.18.109,port=6379,state=online,offset=294,lag=1
slave1:ip=192.168.18.90,port=6379,state=online,offset=294,lag=1
master_replid:73751c89704f3befcc59f1709b45fd6e7c6adf3b
master_replid2:0000000000000000000000000000000000000000
master_repl_offset:294
second_repl_offset:-1
repl_backlog_active:1
repl_backlog_size:1048576
repl_backlog_first_byte_offset:1
repl_backlog_histlen:294
在主服务器上创建文件
[root@lo