Redis Cluster 搭建高可用Redis服务器集群

redis-cluster提供的功能：

1. 节点自动发现
2. 主从选举，切换，集群容错
3. 集群管理
4. 在线分片
5. ASK转向/MOVED转向机制

架构细节说明：

(1)所有的redis节点彼此互联(PING-PONG机制),内部使用二进制协议优化传输速度和带宽.

(2)节点的fail是通过集群中超过半数的master节点检测失效时才生效.

(3)客户端与redis节点直连,不需要中间proxy层.客户端不需要连接集群所有节点,连接集群中任何一个可用节点即可

(4)redis-cluster把所有的物理节点映射到[0-16383]slot上,cluster 负责维护node<->slot<->key

选举容错

(1)领导选举过程是集群中所有master参与,如果半数以上master节点与故障节点通信超过(cluster-node-timeout),认为该节点故障，自动触发故障转移操作.

(2):什么时候整个集群不可用(cluster_state:fail)? 

    a:如果集群任意master挂掉,且当前master没有slave.集群进入fail状态,也可以理解成集群的slot映射[0-16383]不完成时进入fail态.   redis-3.0.0.rc1加入cluster-require-full-coverage参数,默认关闭,打开集群兼容部分失败.

    b:如果集群超过半数以上master挂掉，无论是否有slave集群进入fail状态.

  ps:当集群不可用时,所有对集群的操作做都不可用，收到((error) CLUSTERDOWN The cluster is down)错误

搭建集群说明：本人用的是4台服务器来搭建，同时要让集群正常工作至少需要3个主节点，所以这里每台主机都会开启3个redis实例，就一共12个实例，（6个master和6个slave）

例如：

主机1：192.168.25.65

主机2：192.168.25.66

主机3：192.168.25.67

主机4：192.168.25.68

搭建的步骤：

1.先安装好redis，安装步骤请自行百度

2.在各个主机创建集群目录

mkdir -p /usr/local/RedisCluster
cd  /usr/local/RedisCluster
mkdir 7000 7001 7002
(依次在余下主机创建7003-7011)

3.修改redis.conf配置文件，并放进集群目录

cp /etc/redis/redis.conf /usr/local/RedisCluster/7000

按照如下修改：（每个实例都得修改，根据相应端口修改）

port 7000
daemonize yes
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
appendonly yes

4.分别启动7000-7011共12个redis实例

redis-server redis.conf

可以查看服务启动情况： ps aux|grep redis

5.进入redis的目录将redis-trib.rb复制到/usr/local/bin目录下

cp redis-trib.rb /usr/local/bin/

6.安装ruby

yum -y install ruby ruby-devel rubygems rpm-build
gem install redis

7.创建集群（只需在其中一台主机上操作即可）

redis-trib.rb create --replicas 1 192.168.25.65:7000 192.168.25.65:7001 192.168.25.65:7002 192.168.25.66:7003 192.168.25.66:7004 192.168.25.66:7005 192.168.25.67:7006 192.168.25.67:7007 192.168.25.67:7008 192.168.25.68:7009 192.168.25.68:7010 192.168.25.68:7011

8.集群创建成功，连接方式为：redis-cli -h 192.168.25.65 -c -p 7000  (-c代表可连接到集群) ，进入redis，设置一个值，然后在其他节点上查看。同时当kill掉一个master节点，cluster会重新选举另一个节点当master

可能遇到的错误：

1.配置完所有主节点后,报" ERR Invalid node address specified"

    由于Redis-trib.rb 对域名或主机名支持不好,故在创建集群的时候要使用ip:port的方式

   redis-trib.rb create ip1:port1 ip2:port2 ip3:port3

2.出现err slot 0 is already busy (redis::commanderror)

 这时需要删除nodes-*.conf文件dump.rdb文件（每个服务器上都会生成，记得全部清空），然后重启每个redis实例