Redis详解（十）------ 从零开始搭建集群

目录

• 1、为什么需要集群?
• 2、数据分区方式
• 3、一致性哈希分布
• 4、Redis Cluster虚拟槽分区
• 5、原生搭建 Redis Cluster
  • ①、服务器列表
  • ②、配置各个节点参数
  • ③、建立各个节点通信
  • ④、分配槽位
  • ⑤、主从配置
  • ⑥、测试
• 6、脚本搭建Redis Cluster
  • ①、Redis5之前使用redis-trib.rb脚本搭建
  • ②、Redis5版本集群搭建　
• 7、集群扩容
  • ①、配置新增节点文件
  • ②、将新增主节点加入到集群中
  • ③、为新增主节点分配槽位
  • ④、将新增的从节点添加到集群中
  • ⑤、建立新增节点的主从关系
  • ⑥、测试
• 8、集群收缩
  • ①、迁移待移除节点的槽位
  •  ②、移除待删除主从节点

 

---

　　在上一篇博客我们介绍了------Redis哨兵(Sentinel)模式,哨兵模式主要是解决高可用问题,在master节点宕机时,slave节点能够自动切换成为master节点

　　本篇博客我们来介绍Redis的另外一种模式------集群模式.

　　PS：我这里搭建演示的版本是redis-5.0.5，这个版本对于集群搭建会有很大的简化，比如最常用的redis-trib.rb脚本功能已经集成到redis-cli工具中了，具体下面会详细介绍。

回到顶部

1、为什么需要集群?

　　①、并发量

　　通常来说,单台Redis能够执行10万/秒的命令,这个并发基本上能够满足我们所有需求了,但有时候比如做离线计算,为了更快的得出结果,有时候我们希望超过这个并发,那这个时候单机就不满足我们需求了,就需要集群了.

　　②、数据量

　　通常来说,单台服务器的内存大概在16G-256G之间,前面我们说Redis数据量都是存在内存中的,那如果实际业务要保存在Redis的数据量超过了单台机器的内存,这个时候最简单的方法是增加服务器内存,但是单台服务器内存不可能无限制的增加,纵向扩展不了了,便想到如何进行横向扩展.这时候我们就会想将这些业务数据分散存储在多台Redis服务器中,但是要保证多台Redis服务器能够无障碍的进行内存数据沟通,这也就是Redis集群.

回到顶部

2、数据分区方式

　　对于集群来说,如何将原来单台机器上的数据拆分,然后尽量均匀的分布到多台机器上,这是我们创建集群首先要考虑的一个问题,通常来说,有如下两种数据分区方式.

　　①、顺序分布

　　比如我们有100W条数据,有3台服务器,我们可以将100W/3的结果分别存储到三台服务器上,如下所示:

 　　

　　特点：键值业务相关；数据分散，但是容易造成访问倾斜；支持顺序访问；支持批量操作

　　②、哈希分布

　　同样是100W条数据,有3台服务器,通过自定义一个哈希函数,比如节点取余的方法,余数为0的存在第一台服务器,余数为1的存在第二台服务器,余