Redis集群

---

一、引言

• 容量不够，redis如何进行扩容？
• 并发写操作， redis如何分摊？
• 另外，主从模式，薪火相传模式，主机宕机，导致ip地址发生变化，应用程序中配置需要修改对应的主机地址、端口等信息。

之前通过代理主机来解决，但是redis3.0中提供了解决方案 >> 无中心化集群配置

二、什么是集群

• Redis 集群实现了对Redis的水平扩容，即启动N个redis节点，将整个数据库分布存储在这N个节点中，每个节点存储总数据的1/N。
• Redis 集群通过分区（partition）来提供一定程度的可用性（availability）：即使集群中有一部分节点失效或者无法进行通讯， 集群也可以继续处理命令请求。

三、搭建集群

1. 配置信息

• 引入主redis.conf文件：include redis.conf的绝对路径
• Pid：pidfile 文件名字
• 指定端口：port 端口号
• RDB：dbfilename 文件名
• AOF：Appendonly 关掉或者换名字
• 日志文件：logfile 文件名字
• 主机密码：masterauth 密码（没有设置密码不设置）
• 开启后台服务：daemonize yes
• 打开集群模式：cluster-enabled yes
• 设定节点配置文件名：cluster-config-file 文件名
• 设定节点失联时间，超过该时间（毫秒），集群自动进行主从切换：cluster-node-timeout 时间

include /opt/myredis/cluster/redis.conf
pidfile /var/run/redis_6370.pid
port 6370
dbfilename dump6370.rdb
masterauth akakak
dir /opt/myredis/cluster
logfile /opt/myredis/cluster/redis6370.log
cluster-enabled yes
cluster-config-file nodes-6370.conf
cluster-node-timeout 15000

修改好redis6370.conf文件，拷贝多个redis.conf文件

vi/vim编辑器使用查找替换修改另外5个文件，例如 :%s/6379/6380

注意：

• 如果对集群设置密码，那么requirepass和masterauth都需要设置，否则发生主从切换时，就会遇到授权问题
• 各个节点的密码都必须一致，否则Redirected就会失败

2. 启动6个redis服务

3. 合成集群

组合之前，请确保所有redis实例启动后，nodes-xxxx.conf文件都生成正常

合体

redis-cli -a akakak --cluster create --cluster-replicas 1 192.168.232.100:6370 192.168.232.100:6371 192.168.232.100:6380 192.168.232.100:6381 192.168.232.100:6390 192.168.232.100:6391

• 需要到Redis的src目录下进行，cd /opt/redis-7.0.0/src
• 如果有设置密码，需要加上 -a 密码
• 不要用回路地址127.0.0.1， 请用真实IP地址
• --cluster-replicas 1：一台主机，一台从机，正好三组，采用最简单的方式配置集群
  
  

四、登录集群

• 普通方式登录
  可能直接进入读主机，存储数据时，会出现MOVED重定向操作。所以，应该以集群方式登录。
  
• -c 采用集群策略连接，设置数据会自动切换到相应的写主机
  

五、通过 cluster nodes 命令查看集群信息

• 主机：6380，从机：6381
• 主机：6371，从机：6391
• 主机：6370，从机：6390

六、redis cluster 如何分配这六个节点?

• 一个集群至少要有三个主节点。
• 选项 --cluster-replicas 1 表示我们希望为集群中的每个主节点创建一个从节点。
• 分配原则尽量保证每个主数据库运行在不同的IP地址，每个从库和主库不在一个IP地址上。

七、slot 插槽

• 一个 Redis 集群包含 16384 个插槽（hash slot）， 数据库中的每个键都属于这 16384 个插槽的其中一个。
• 集群使用公式 CRC16(key) % 16384 来计算键 key 属于哪个槽， 其中 CRC16(key) 语句用于计算键 key 的 CRC16 校验和 集群中的每个节点负责处理一部分插槽。
• 例如，在刚才搭建的集群中，其中：

节点 6370 负责处理 0 号至 5460 号插槽。
节点 6371 负责处理 5461 号至 10922 号插槽。
节点 6380 负责处理 10923 号至 16383 号插槽。

八、在集群中录入值

• 在 redis-cli 每次录入、查询键值，redis都会计算出该key应该送往的插槽，如果不是该客户端对应服务器的插槽，redis会报错，并告知应前往的redis实例地址和端口。
• redis-cli 客户端提供了 –c 参数实现自动重定向。如 redis-cli -c -p 6370 登入后，再录入、查询键值对可以自动重定向。
• 不在一个slot下的键值，是不能使用mget,mset等多键操作
  
• 可以通过{}来定义组的概念，从而使key中{}内相同内容的键值对放到一个slot中去
  

九、查询集群中的值

cluster keyslot <key>  # 查询key对应的插槽值
cluster countkeysinslot <slot>  # 该插槽里key的数量(只能查询当前节点)
cluster getkeysinslot <slot> <count>  # 获取该插槽里指定数量的key(只能查询当前节点)

十、故障恢复

• 如果主节点下线，15秒主节点无法重新上线，从节点自动升为主节点（时间配置文件决定）
  
• 主节点恢复后，主节点回来变成从机
  
• redis.conf 中的参数 cluster-require-full-coverage
  如果某一段插槽的主从都挂掉，而 cluster-require-full-coverage 为 yes ，那么整个集群都挂掉
  如果某一段插槽的主从都挂掉，而 cluster-require-full-coverage 为 no ，那么该插槽数据全都不能使用，也无法存储

十一、集群的SpringBoot开发

spring:
  redis:
    cluster:
      nodes: CentOS7:6370  # 集群节点(List<String>,可配置多个节点)
    password: akakak       # Redis服务器连接密码
    database: 0            # Redis数据库索引（默认为0）
    timeout: 1800000       # 连接超时时间（毫秒）
    lettuce:
      pool:
        max-active: 20  # 连接池最大连接数（使用负值表示没有限制）
        max-wait: -1    # 最大阻塞等待时间(负数表示没限制)
        max-idle: 5     # 连接池中的最大空闲连接
        min-idle: 0     # 连接池中的最小空闲连接

@SpringBootTest
class RedisSpringBootApplicationTests {

    @Autowired
    private StringRedisTemplate redisTemplate;

    @Test
    void redisTest() {
        // 获取对Redis字符串数据键值的操作对象
        ValueOperations<String, String> operations = redisTemplate.opsForValue();

        operations.set("message", "hello, redis-springboot");
        String value = operations.get("message");
        System.out.println(value);
    }
}

十二、Redis 集群提供的好处

• 实现扩容
• 分摊压力
• 无中心配置相对简单

十三、Redis 集群的不足

• 多键操作是不被支持的
• 多键的Redis事务是不被支持的。lua脚本不被支持
• 由于集群方案出现较晚，很多公司已经采用了其他的集群方案，而代理或者客户端分片的方案想要迁移至redis cluster，需要整体迁移而不是逐步过渡，复杂度较大。