Redis cluster集群搭建

Redis集群介绍

Redis 集群是一个提供在多个Redis间节点间共享数据的程序集。
Redis集群并不支持处理多个keys的命令,因为这需要在不同的节点间移动数据,从而达不到像Redis那样的性能,在高负载的情况下可能会导致不可预料的错误.
Redis 集群通过分区来提供一定程度的可用性,在实际环境中当某个节点宕机或者不可达的情况下继续处理命令. Redis 集群的优势:
自动分割数据到不同的节点上。
整个集群的部分节点失败或者不可达的情况下能够继续处理命令。

Redis 集群的数据分片

Redis 集群没有使用一致性hash, 而是引入了 哈希槽的概念.

Redis 集群有16384个哈希槽,每个key通过CRC16校验后对16384取模来决定放置哪个槽.集群的每个节点负责一部分hash槽,举个例子,比如当前集群有3个节点,那么:

节点 A 包含 0 到 5500号哈希槽.

节点 B 包含5501 到 11000 号哈希槽.

节点 C 包含11001 到 16384号哈希槽.

这种结构很容易添加或者删除节点. 比如如果我想新添加个节点D, 我需要从节点 A, B, C中得部分槽到D上. 如果我想移除节点A,需要将A中的槽移到B和C节点上,然后将没有任何槽的A节点从集群中移除即可. 由于从一个节点将哈希槽移动到另一个节点并不会停止服务,所以无论添加删除或者改变某个节点的哈希槽的数量都不会造成集群不可用的状态。

集群搭建

实验环境，本次实验用到一台主机就可以了，不过首先要安装redis，详见上一篇博客Redis的主从复制和高可用性只要安装上就可以进行设置了。

1.关闭redis_6379

[root@server1 redis]# /etc/init.d/redis_6379 stop

为了防止服务冲突，所以关闭上面打开的redis_6379服务，没有打开的话可以忽略。

2.创建目录，配置文件

创建好这6个目录，之后要进入每一个目录编写配置文件。

[root@server1 rediscluster]# cd 1001
[root@server1 1001]# ls
[root@server1 1001]# vim redis.conf

port 1001
cluster-enabled yes 
cluster-config-file nodes.conf
cluster-node-timeout 5000
appendonly yes 
pidfile "/usr/local/rediscluster/1001/redis.pid"
logfile "/usr/local/rediscluster/1001/redis.log"
daemonize yes 
dir "/usr/local/rediscluster/1001"                                      

编写好文件后还要进行加载。

[root@server1 1001]# redis-server redis.conf

现在对目录1001的配置文进行了编写，并且加载了。下面要对剩下的1002到1006目录进行同样的操作，为了方便可以直接将文件复制到相应目录，之后将文件中的1001替换为相应的目录名就可以了。

[root@server1 1001]# ps ax

查看进程，配置都成功加载了。

3.开启服务，创建群组

[root@server1 1006]# redis-cli --cluster create \
--cluster-replicas 1 127.0.0.1:1001 127.0.0.1:1002 \
127.0.0.1:1003 127.0.0.1:1004 127.0.0.1:1005 127.0.0.1:1006

创建一个集群，编号为1，将启动的6个redis加入在一个集群。

[root@server1 1006]# redis-cli --cluster info 127.0.0.1:1001

查看master，slave集群信息。入1001分到5461的空间，有一个slave节点。
测试：
进入一个节点写入数据，之后再进行查看。

这里进入1003写入数据，这里数据写到了5798这个位置，刚好这个位置在1002内所以读数据时转到了1002。

随意进入一个节点读取数据，都回到1002上查找数据。
因为这6个节点是一主一从成对存在的，所以，如果master停掉了，数据就可以在slave查看到

这里停掉1002，在slave1005查到了数据，如果1005也停掉了就查不到数据了。

如果要恢复的话只要重新加载一下这两个节点的配置即可。

加载配置之后又可以正常查看到数据了。

4.添加节点

之前创建节点的时候创建了6个节点，现在再添加两个节点，节点一般都是成对添加的。
1.建立目录，编写配置文件，开启服务

建立1007和1008两个节点目录。

同样的进入1001或在其他目录，复制主配置文件到新目录。

[root@server1 1007]# vim redis.conf 

port 1007
cluster-enabled yes 
cluster-config-file nodes.conf
cluster-node-timeout 5000
appendonly yes 
pidfile "/usr/local/rediscluster/1007/redis.pid"
logfile "/usr/local/rediscluster/1007/redis.log"
daemonize yes 
dir "/usr/local/rediscluster/1007"

同样的，将里面的1001替换为相应的目录名。

[root@server1 1007]# redis-server redis.conf 

之后启动服务。

[root@server1 1007]# ps ax

查看进程中是否有这两个节点。
2.将节点加入集群

[root@server1 1007]# redis-cli --cluster add-node 127.0.0.1:1007 127.0.0.1:1001

将1007节点添加到集群里，位置为1001的位置。

[root@server1 1007]# redis-cli -c -p 1001
127.0.0.1:1001> cluster nodes

可以看到1007节点确实已经加入集群，最前面的一列为节点的node ID，通过这个id可以识别这个节点。
之后再将1008加入节点，作为1007的slave节点。

[root@server1 1007]# redis-cli --cluster add-node 127.0.0.1:1008 127.0.0.1:1007 \
--cluster-slave --cluster-master-id 6c8cd84442f2ee6011b0763a04bd1bcc1f9d4012

把1008加入节点，作为1007的slave节点，这里的master-id就是前面的node ID，复制下来即可。


成功将1008节点加入集群，但此时这两个节点是没有分配数据槽的，所以不能存放数据。
4.给加入的节点分配数据槽

[root@server1 1007]# redis-cli --cluster reshard 127.0.0.1:1007

给1007节点指定分配300数据槽。

这样分配数据槽由于数据槽大小不一致，有可能回导致数据丢失，所以要最好使所有节点均分数据槽。

[root@server1 1007]# redis-cli --cluster rebalance \
--cluster-threshold 1 --cluster-use-empty-masters 127.0.0.1:1007

再次查看，数据槽已经均分，大小都为4096。