目录
前言
首先单节点Redis服务器会带来单点故障,服务不可用,其次由于Redis默认是单进程,无法
处理大量的并发数据请求,那么若是开启多进程又会导致cpu压力过大,重中之重的是数据丢失是
一大灾难,为了避免以上情况,需要Redis服务器数量,但是增加服务器数据并不是单一的增加,
需要搭建Redis集群模式,从而共享任务/资源。redis群集有三种模式,分别是主从同步/复制、哨
兵模式、Cluster。在Redis中,实现高可用的技术主要包括持久化、主从复制、哨兵模式和集群
(Cluster)。
一、redis集群介绍
redis是一个开源的kevvalue存储系统,受到了广大互联网公司的青睐。redis3.0版本之前只支
持单例模式,在3.0版本及以后才支持集群 redis集群采用P2P模式,是完全去中心化的,不存在中
心节点或者代理节点。为了实现集群的高可用,即判新节点是否健康(能否正常使用), redis-
cluster有一个投票容错机制:如果集群中超过半数的节点投票认为某个节点挂了,那么这个节点就
挂了(fail)。
Redis集群是一个提供在多个Redis间节点间共享数据的程序集;Redis集群并不支持处理多个
keys的命令,因为这需要在不同的节点间移动数据,从而达不到像Redis那样的性能,在高负载的情
况下可能会导致不可预料的错误;Redis集群通过分区来提供一定程度的可用性,在实际环境中当某
个节点宕机或者不可达的情况下可继续处理命令。
1、redis集群优势及实现方法
Redis集群的优势:自动分割数据到不同的节点上;整个集群的部分节点失败或者不可达的情
况下能够继续处理命令。
Redis集群的实现方法:有客户端分片;代理分片;服务器端分片。
2、redis三种集群模式的作用
它们的作用,以及解决了什么样的问题呢?(之前介绍过了持久化)
①主从复制
主从复制是高可用Redis的基础,哨兵和集群都是在主从复制基础上实现高可用的。主从复制主要
实现了数据的多机备份,以及对于读操作的负载均衡和简单的故障恢复。
缺陷:故障恢复无法自动化;写操作无法负载均衡;存储能力受到单机的限制。
② 哨兵
在主从复制的基础上,哨兵实现了自动化的故障恢复。
缺陷:写操作无法负载均衡:存储能力受到单机的限制。
③ 集群
通过集群,Redis解决了写操作无法负载均衡,以及存储能力受到单机限制的问题,实现了较为完
善的高可用方案。
二、主从复制模式
1、Redis主从复制的概念
主从复制,是指将一台Redis服务器的数据,复制到其他的Redis服务器。
◆前者称为主节点(Master),后者称为从节点(Slave);
◆数据的复制是单向的,只能由主节点到从节点。
默认情况下,每台Redis服务器都是主节点;一个主节点可以有多个从节点(或没有从节点),但一
个从节点只能有一个主节点.
2、主从复制原理
通过持久化功能,redis保证了即使在服务器重启的情况下也不会丢失(或少量丢失)数据,因为
持久化会把内存中的数据保存到硬盘上,重启会从硬盘上加载数据,但是由于数据是存储在一台服
务器上的,如果这台服务器出现硬盘故障等问题,也会导致数据丢失。为了避免单点故障,通常的
做法是将数据库复制多个副本以部署在不同的服务器上,这样即使有一台服务器出现故障,其他服
务器依然可以继续提供服务,为此,redis提供了复制(replication)功能,可以实现当一台数据库中
的数据更新后,自动将更新的数据同步到其他数据库上。
在复制的概念中,数据库分为两类,一类是主数据库(master),另一类是从数据(slave)。主数据可
以进行读写操作,当写操做导致数据变化时自动将数据同步给数据库,而从数据库一般是只读的,
并接收主数据同步过来的数据。一个主数据库可以拥有多个从数据库,而一个从数据库只能拥有一
个主数据库。
3、Redis主从复制的作用
①数据冗余:主从复制实现了数据的热备份,是持久化之外的一种数据冗余方式。
②故障恢复:当主节点出现问题时,可以由从节点提供服务,实现快速的故障恢复;实际上是一种
服务的冗余。
③负载均衡:在主从复制的基础上,配合读写分离,可以由主节点提供写服务,由从节点提供读服
务(即写Redis数据时应用连接主节点,读Redis数据时应用连接从节点),分担服务器负载;尤其
是在写少读多的场景下,通过多个从节点分担读负载,可以大大提高Redis服务器的并发量。
④高可用基石:除了上述作用以外,主从复制还是哨兵和集群能够实施的基础,因此说主从复制是
Redis高可用的基础。
4、主从复制流程
① 若启动一个Slave机器进程,则它会向Master机器发送一个"sync_command"命令,请求同步连
接
② 无论是第一次连接还是重新连接,Master机器都会启动一个后台进程,将数据快照(RDB)保存到
数据文件中(执行rdb操作),同时Master还会记录修改数据的所有命令并缓存在数据文件中。
③ 后台进程完成缓存操作之后,Master机器就会向Slave机器发送数据文件,Slave端机器将数据
文件保存到硬盘上,然后将其加载到内存中,接着Master机器就会将修改数据的所有操作一并发送
给Slave端机器。若Slave出现故障导致宕机,则恢复正常后会自动重新连接。
④ Master机器收到slave端机器的连接后,将其完整的数据文件发送给Slave端机几器,如果Mater
同时收到多个slave发来的
同步请求则Master会在后台启动一个进程以保存数据文件,然后将其发送给所有的Slave端机器,
确保所有的Slave端机器都正常。
5、Redis主从复制的搭建
①、前期准备
环境配置,下面主从复制与哨兵模式都使用此架构IP。
操作系统 |
IP地址 |
安装包 |
|
Master |
CentOS7 |
192.168.110.128 |
redis-5.0.7.tar.gz |
Slave1 |
CentOS7 |