Redis 高可用集群
Redis Cluster
什么是Redis-Cluster:
为何要搭建Redis集群。Redis是在内存中保存数据的,而我们的电脑一般内存都不大,这也就意味着Redis不适合存储大数据,适合存储大数据的是Hadoop生态系统的Hbase或者是MogoDB。Redis更适合处理高并发,一台设备的存储能力是很有限的,但是多台设备协同合作,就可以让内存增大很多倍,这就需要用到集群。
Redis集群搭建的方式有多种,例如使用客户端分片、Twemproxy、Codis等,但从redis 3.0之后版本支持redis-cluster集群,它是Redis官方提出的解决方案,Redis-Cluster采用无中心结构,每个节点保存数据和整个集群状态,每个节点都和其他所有节点连接。其redis-cluster架构图如下:
客户端与 redis 节点直连,不需要中间 proxy 层.客户端不需要连接集群所有节点连接集群中任何一个可用节点即可。
所有的 redis 节点彼此互联(PING-PONG 机制),内部使用二进制协议优化传输速度和带宽.
分布存储机制-槽 :
这个在集群搭完会提到。
容错机制-投票
1.选举过程是集群中所有master参与,如果半数以上master节点与故障节点通信超过(cluster-node-timeout),认为该节点故障,自动触发故障转移操作. 故障节点对应的从节点自动升级为主节点。
2.什么时候整个集群不可用(cluster_state:fail)?
如果集群任意master挂掉,且当前master没有slave.集群进入fail状态,也可以理解成集群的slot映射[0-16383]不完成时进入fail状态.
就简绍到这里,接下来我们开始搭建redis集群:
搭建Redis-Cluster
搭建要求: 需要 6 台 redis 服务器,搭建伪集群(在一台服务器上来模拟redis集群)。
需要 6 个 redis 实例。
需要运行在不同的端口 7002-7007 ( 通过不同的端口号来区分)
准备工作
-
在阿里云上面安装 gcc: Redis 是 c 语言开发的。安装 redis 需要 c 语言的编译环境。如果没有 gcc 需要在线安装。
1.安装gcc的指令
yum install gcc-c++
2.使用yum命令安装 ruby (我们需要使用ruby脚本来实现集群搭建)
yum install ruby yum install rubygems
-
将redis源码包上传到 linux 系统 ,解压redis源码包
编译redis源码 ,进入redis源码文件夹make
3.看到以下输出结果,表示编译成功
4.创建目录/usr/local/redis-cluster目录, 安装6个redis实例,分别安装在以下目录
以第一个redis实例为例,命令如下:
make install PREFIX=/usr/local/java/redis/redis-cluter/redis1
在这里要注意: 要先进入redis 那个文件夹再使用这个指令