Redis集群（cluster模式）搭建

最新推荐文章于 2024-04-25 14:31:37 发布
最新推荐文章于 2024-04-25 14:31:37 发布
阅读量6.2k 收藏 16
点赞数 3
分类专栏： Linux 文章标签： redis 数据库 java linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Microhoo_/article/details/130561088
版权

目录

1、什么是集群

2、为什么使用

3、集群连接

4、redis cluster 如何分配这六个节点?

5、集群搭建：

1、什么是集群

  1. Redis 集群（包括很多小集群）实现了对Redis的水平扩容，即启动N个redis节点，将整个数据库分布存储在这N个节点中，每个节点存储总数据的1/N，即一个小集群存储1/N的数据，每个小集群里面维护好自己的1/N的数据。
  2. Redis 集群通过分区（partition）来提供一定程度的可用性（availability）： 即使集群中有一部分节点失效或者无法进行通讯， 集群也可以继续处理命令请求。
  3. 该模式的redis集群特点是：分治、分片。

2、为什么使用

  1. 容量不够，redis如何进行扩容？

  2. 并发写操作， redis如何分摊？

  3. 另外，主从模式，薪火相传模式，主机宕机，导致ip地址发生变化，应用程序中配置需要修改对应的主机地址、端口等信息。

  4. 之前通过代理主机来解决，但是redis3.0中提供了解决方案。就是无中心化集群配置。

3、集群连接

  1. 普通方式登录：可能直接进入读主机，存储数据时，会出现MOVED重定向操作，所以，应该以集群方式登录。
  2. 集群登录：redis-cli -c -p 6379 采用集群策略连接，设置数据会自动切换到相应的写主机。

4、redis cluster 如何分配这六个节点?

  1. 一个集群至少要有三个主节点。

  2. 选项 –cluster-replicas 1 ：表示我们希望为集群中的每个主节点创建一个从节点。

  3. 分配原则尽量保证每个主数据库运行在不同的IP地址，每个从库和主库不在一个IP地址上。

5、集群搭建：

1)  通过redis中utils路径下 ./install_server.sh 执行文件创建6个不同的redis节点，端口号分别为6379、6380、6381、8362、6383、6384

2）如果各个节点原本有存储数据，则先将各个节点的数据文件清空。将6个文件夹内的文件全部删除。

清空数据目录。删除 Redis 数据目录下的所有文件。使用命令：  rm -rf /path/to/redis/data/*

3）修改6个redis节点的配置文件

在 /etc/redis 文件中，找到每一个端口号对应的配置文件：

例如修改的内容如下：
bind 0.0.0.0
port 6380 # 设置成对应服务专属的端口号
daemonize yes
dbfilename "dump6380.rdb"  # 设置成对应服务专属的名字
appendonly yes
cluster-enabled yes
cluster-config-file nodes-6380.conf  # 设置成对应服务专属的

 4）启动六个节点

[root@bogon src]# ./redis-server /etc/redis/6379.conf
[root@bogon src]# ./redis-server /etc/redis/6380.conf
[root@bogon src]# ./redis-server /etc/redis/6381.conf
[root@bogon src]# ./redis-server /etc/redis/6382.conf
[root@bogon src]# ./redis-server /etc/redis/6383.conf
[root@bogon src]# ./redis-server /etc/redis/6384.conf

5）查看各个节点是否启动成功  

[root@bogon src]# ps -ef | grep redis
root        3889       1  0 09:56 ?        00:00:03 ./redis-server 0.0.0.0:6379 [cluster]
root        3895       1  0 09:56 ?        00:00:03 ./redis-server 0.0.0.0:6380 [cluster]
root        3901       1  0 09:57 ?        00:00:03 ./redis-server 0.0.0.0:6381 [cluster]
root        3907       1  0 09:57 ?        00:00:02 ./redis-server *:6382 [cluster]
root        3913       1  0 09:57 ?        00:00:02 ./redis-server 0.0.0.0:6383 [cluster]
root        3919       1  0 09:57 ?        00:00:02 ./redis-server 0.0.0.0:6384 [cluster]
root        4247    2418  0 10:22 pts/0    00:00:00 grep --color=auto redis

6）配置集群

命令格式： --cluster-replicas 1 表示为每个master创建一个slave节点

注意：这里的IP为每个节点所在机器的真实IP  

[root@localhost src]# ./redis-cli --cluster create 192.168.177.128:6379 192.168.177.128:6380 192.168.177.128:6381 192.168.177.128:6382 192.168.177.128:6383 192.168.177.128:6384 --cluster-replicas 1
>>> Performing hash slots allocation on 6 nodes...
Master[0] -> Slots 0 - 5460
Master[1] -> Slots 5461 - 10922
Master[2] -> Slots 10923 - 16383
Adding replica 192.168.177.128:6383 to 192.168.177.128:6379
Adding replica 192.168.177.128:6384 to 192.168.177.128:6380
Adding replica 192.168.177.128:6382 to 192.168.177.128:6381
>>> Trying to optimize slaves allocation for anti-affinity
[WARNING] Some slaves are in the same host as their master
M: ae77569d28f01657d9e3e04810e8562abdb3f5dd 192.168.177.128:6379
   slots:[0-5460] (5461 slots) master
M: 5ccafb9ee2f223c987c740d3d8282f200e4892dd 192.168.177.128:6380
   slots:[5461-10922] (5462 slots) master
M: dcd5d5066cd9aa5e3f2830ce985395acb978d764 192.168.177.128:6381
   slots:[10923-16383] (5461 slots) master
S: 8849bb5437931a3fd8510ffa4c0f755f4e26d1eb 192.168.177.128:6382
   replicates ae77569d28f01657d9e3e04810e8562abdb3f5dd
S: b00800f65775c52519bd6e9f398f916ffe46fed8 192.168.177.128:6383
   replicates 5ccafb9ee2f223c987c740d3d8282f200e4892dd
S: 6e7a1ae63691267b000363f6528b620a656e03e7 192.168.177.128:6384
   replicates dcd5d5066cd9aa5e3f2830ce985395acb978d764
Can I set the above configuration? (type 'yes' to accept): yes
>>> Nodes configuration updated
>>> Assign a different config epoch to each node
>>> Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join
..
>>> Performing Cluster Check (using node 192.168.177.128:6379)
M: ae77569d28f01657d9e3e04810e8562abdb3f5dd 192.168.177.128:6379
   slots:[0-5460] (5461 slots) master
   1 additional replica(s)
M: dcd5d5066cd9aa5e3f2830ce985395acb978d764 192.168.177.128:6381
   slots:[10923-16383] (5461 slots) master
   1 additional replica(s)
M: 5ccafb9ee2f223c987c740d3d8282f200e4892dd 192.168.177.128:6380
   slots:[5461-10922] (5462 slots) master
   1 additional replica(s)
S: 8849bb5437931a3fd8510ffa4c0f755f4e26d1eb 192.168.177.128:6382
   slots: (0 slots) slave
   replicates ae77569d28f01657d9e3e04810e8562abdb3f5dd
S: b00800f65775c52519bd6e9f398f916ffe46fed8 192.168.177.128:6383
   slots: (0 slots) slave
   replicates 5ccafb9ee2f223c987c740d3d8282f200e4892dd
S: 6e7a1ae63691267b000363f6528b620a656e03e7 192.168.177.128:6384
   slots: (0 slots) slave
   replicates dcd5d5066cd9aa5e3f2830ce985395acb978d764
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.

7）查看主从关系

命令格式：redis-cli --cluster check 【本台redis自己的IP】:【本台redis自己的端口】

[root@localhost src]# ./redis-cli --cluster check 192.168.177.128:6379
192.168.177.128:6379 (ae77569d...) -> 0 keys | 5461 slots | 1 slaves.
192.168.177.128:6381 (dcd5d506...) -> 0 keys | 5461 slots | 1 slaves.
192.168.177.128:6380 (5ccafb9e...) -> 0 keys | 5462 slots | 1 slaves.
[OK] 0 keys in 3 masters.
0.00 keys per slot on average.
>>> Performing Cluster Check (using node 192.168.177.128:6379)
M: ae77569d28f01657d9e3e04810e8562abdb3f5dd 192.168.177.128:6379
   slots:[0-5460] (5461 slots) master
   1 additional replica(s)
M: dcd5d5066cd9aa5e3f2830ce985395acb978d764 192.168.177.128:6381
   slots:[10923-16383] (5461 slots) master
   1 additional replica(s)
M: 5ccafb9ee2f223c987c740d3d8282f200e4892dd 192.168.177.128:6380
   slots:[5461-10922] (5462 slots) master
   1 additional replica(s)
S: 8849bb5437931a3fd8510ffa4c0f755f4e26d1eb 192.168.177.128:6382
   slots: (0 slots) slave
   replicates ae77569d28f01657d9e3e04810e8562abdb3f5dd
S: b00800f65775c52519bd6e9f398f916ffe46fed8 192.168.177.128:6383
   slots: (0 slots) slave
   replicates 5ccafb9ee2f223c987c740d3d8282f200e4892dd
S: 6e7a1ae63691267b000363f6528b620a656e03e7 192.168.177.128:6384
   slots: (0 slots) slave
   replicates dcd5d5066cd9aa5e3f2830ce985395acb978d764
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.

查看下图即可发现，一主对一从： 

8) 主节点数据写测试

加参数 -c ，防止路由失效

[root@bogon src]# ./redis-cli -p 6381 -c
127.0.0.1:6381> get name
-> Redirected to slot [5798] located at 192.168.109.149:6380
(nil)
192.168.109.149:6380> get name
(nil)
192.168.109.149:6380>

9）从节点读数据测试

情况：redis cluster集群中slave节点能成功复制master节点数据槽数据，但是无法get数据，显示只能到对应的master节点读取

原因：Redis Cluster集群中的从节点，官方默认设置的是不分担读请求的、只作备份和故障转移用,当有请求读向从节点时，会被重定向对应的主节点来处理

解决办法：在get数据之前先使用命令readonly,这个readonly告诉 Redis Cluster 从节点客户端愿意读取可能过时的数据并且对写请求不感兴趣

注意:断开连接后readonly就失效了，再次连接需要重新使用该命令。

[root@bogon src]# ./redis-cli -p 6379 -c
127.0.0.1:6379> set name zhangsan
-> Redirected to slot [5798] located at 192.168.109.149:6380
OK
192.168.109.149:6380> get name
"zhangsan"
192.168.109.149:6380>
[root@bogon src]# ./redis-cli -p 6383 -c
127.0.0.1:6383> get name
-> Redirected to slot [5798] located at 192.168.109.149:6380
"zhangsan"
192.168.109.149:6380>
[root@bogon src]# ./redis-cli -p 6383 -c
127.0.0.1:6383> readonly
OK
127.0.0.1:6383> get name
"zhangsan"
127.0.0.1:6383>

天空中那座城
关注
  • 3
    点赞
  • 踩
  • 16
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
docker-compose一键搭建Redis集群
06-12
1.先运行 createFile.py 输入宿主机IP地址，输入redis密码 2.按照控制台输出执行docker-compose up -d 启动命令 3.启动成功后执行加入集群命令即可
Redis-Cluster集群搭建
01-17
redis-cluster集群搭建方式，里面包含了需要的插件，搭建步骤也非常详细............................
【Redis快速入门】Redis三种集群搭建配置（主从集群、哨兵集群、分片集群）
小新的博客
02-16 3345
Redis集群🔥🔥🔥 写在前面：🧸 本章是基于CentOS7下的Redis集群教程，包括： 单机安装Redis Redis主从 Redis分片集群 1.单机安装Redis🧸.........
Redis集群配置和管理详解
dhj1212的博客
03-12 880
在之前的哨兵当中，一旦主服务 master 挂掉了，就势必会导致一段时间内的数据写不进去了，当并发量很大的时候这势必是一个比较大的问题。集群就说为了解决这个问题而诞生的。由于数据量过大，单个Master主从集难以承担，因此需要对多个主从集进行集群，形成水平扩展每个主从集只负责存储整个数据集的一部分，这就是Redis的集群，其作用是提供在多个Redis节点间共享数据的程序集。Redis集群是一个提供在多个Redis节点间共享数据的程序集Redis集群可以支持多个Master。
Redis集群搭建【超详细】
热门推荐
YangzaiLeHeHe的博客
06-25 5万+
一、基本环境 首先我们需要使用VMware配置几个虚拟机，我们需要安装VMWare然后 下载自己的linux镜像文件，在虚拟机上安装linux系统， vm15和centos7下载传送门 提取码： lvb5 。我使用的是centos7 64， 大致步骤可以根据其他博客将第一台虚机的系统安装成功，然后直接clone这台机器就可以了，然后需要修改ip。 二、准备相关软件安装包...
Redis集群部署教程详解
Yel_Liang的博客
08-03 2600
Redis集群部署教程详解 ，节点故障后集群会有什么变化
Redis三种集群模式介绍及搭建
QHJJHQ的博客
02-05 2907
redis集群 redis集群就是多个redis节点一起工作的模式。它没有代理节点和中心节点，各个节点平等。 redis集群提供了以下两个好处 1、将数据自动切分(split)到多个节点 2、当集群中的某一个节点故障时，redis还可以继续处理客户端的请求。 集群中的主从复制 集群中的每个节点都有1个至N个复制品，其中一个为主节点，其余的为从节点，如果主节点下线了，集群就会把这个主节点的一个从节点设置为新的主节点，继续工作。这样集群就不会因为一个主节点的下线而无法正常工作。 注意： 1、如果
redis集群搭建（非常详细，适合新手）
qq_33525062的博客
08-11 2623
呼~~~长舒一口气…终于搭建好了Redis集群。整个过程其实挺简单，本篇主要正对入门级别的小伙伴，插入了很多图片，所以显得冗长，希望大家多多理解，如果不当之处，还望及时指正~最后，加上两条redis集群基本命令：1.查看当前集群信息。
Redis主从复制
Jak的博客
03-06 476
一、是什么 1.1 官网 行话：也就是我们所说的主从复制，主机数据更新后根据配置和策略，自动同步到备机的master/slave机制，Master以写为主，Slave以读为主。 1.2 概念 1.2.1 主从复制 主从复制，是指将一台Redis服务器的数据，复制到其他的Redis服务器。前者称为主节点(master/leader)，后者称为从节点(slave/follower)；数据的复制是单向的，只能由主节点到从节点。Master以写为主，Slave以读为主。 默认情况下，每台Redis服
Redis集群搭建的三种方式
weixin_45935673的博客
04-04 2992
Redis集群搭建的三种方式@
集群搭建(Redis）（超详细）
CharmingC1的博客
09-11 3464
(超详细）集群搭建（Redis）
redis集群搭建
睡竹的博客
04-05 2096
redis集群搭建 cluster-require-full-coverage
Redis高可用集群Redis Cluster搭建
08-18
Redis高可用集群Redis Cluster搭建
redis-cluster集群搭建
01-20
配置redis.conf配置文件 bind 定义的是当前服务端允许接收客户端登录时指定使用的ip地址 如果绑定127.0.0.1的意思是只能由本地客户端登录,外界客户端无法登录. 61行 是否开启保护模式,在开启yes时,当前redis只允许本地登录.外界无法范文,no时建议为了安全考虑,需要指定登录的密码 80行 后台守护进程开启,是的redis服务端启动时不占用控制台,将日志内容输出到配置文件指定的日志文件中 log6379.log 128行 202行（不需要手动修改，了解持久化条件） 持久化时间间隔.默认持久化时间配置.数据变动的越频繁,持久化save调用的时间就越短 900秒内
docker redis5.0 cluster集群搭建的实现
01-20
本文是使用 6 个 docker 容器搭建单机集群测试，实际环境如果是多台，可对应修改容器数量、端口号和集群 ip 地址，每台机器都按下面步骤同样操作即可。 拉取redis官方镜像 docker pull redis:5.0 创建配置文件和...
go语言 go-redis watch实例
xiao_xiao_w的博客
04-25 256
讲一下对watch的理解在redis中watch是通过加了乐观锁的方法先获取事务执行前key值，如果在开始执行事务时检测到由于并发key被其他客户端修改了，就会终止事务如果用go-redis实现就是这样的其中watch即使对key值的监听，fn回调函数相当于如果key没有发生修改要执行的事务逻辑。
使用Redis实现延时队列
weixin_43675252的博客
04-25 276
延时队列相比于普通队列最大的区别就体现在其延时的属性上，普通队列的元素是先进先出，按入队顺序进行处理，而延时队列中的元素在入队时会指定一个延迟时间，表示其希望能够在经过该指定时间后处理。从某种意义上来讲，延迟队列的结构并不像一个队列，而更像是一种以时间为权重的有序堆结构。可以看到生产者很简单，其实就是利用zset的特性，给一个zset添加元素而已，而时间就是它的score。消费者的代码也不难，就是把已经过期的zset中的元素给删除掉，然后处理数据。redis的zset实现延迟队列。
redis模糊查询redis中的key
最新发布
qq_43039260的博客
04-25 165
在redis里,允许模糊查询key。有3个通配符 *,?[]: 通配括号内的某1个字符。方式一：使用keys命令。方式二：使用san命令。*: 通配任意多个字符。
为什么Redis使用单线程 性能会优于多线程？
A_aspectJ的博客
04-21 1220
Redis作为一个高性能的内存数据库，通过巧妙地运用非阻塞I/O、多路复用等技术，充分地发挥了单线程模型的优势，避免了多线程可能带来的问题。所以在选择技术方案时，并非线程越多越好，而是需要根据实际情况权衡各种因素。Redis的成功经验告诉我们，合理地利用单线程模型，结合优化的数据结构和高效的I/O处理，能够实现出色的性能表现。
redis集群模式搭建和使用
05-24
Redis集群模式是通过分片来实现数据的分布式存储和高可用性。下面是搭建Redis集群的步骤： 1. 下载Redis并解压缩： ``` $ wget http://download.redis.io/releases/redis-5.0.9.tar.gz $ tar xzf redis-5.0.9.tar.gz $ cd redis-5.0.9 ``` 2. 编译Redis： ``` $ make ``` 3. 复制Redis二进制文件： ``` $ cp src/redis-cli src/redis-server /usr/local/bin/ ``` 4. 创建Redis集群的配置文件： ``` $ mkdir /redis_cluster $ cd /redis_cluster $ touch redis-7000.conf redis-7001.conf redis-7002.conf redis-7003.conf redis-7004.conf redis-7005.conf ``` 5. 编辑配置文件： ``` # redis-7000.conf port 7000 cluster-enabled yes cluster-config-file nodes-7000.conf cluster-node-timeout 5000 appendonly yes # redis-7001.conf port 7001 cluster-enabled yes cluster-config-file nodes-7001.conf cluster-node-timeout 5000 appendonly yes # redis-7002.conf port 7002 cluster-enabled yes cluster-config-file nodes-7002.conf cluster-node-timeout 5000 appendonly yes # redis-7003.conf port 7003 cluster-enabled yes cluster-config-file nodes-7003.conf cluster-node-timeout 5000 appendonly yes # redis-7004.conf port 7004 cluster-enabled yes cluster-config-file nodes-7004.conf cluster-node-timeout 5000 appendonly yes # redis-7005.conf port 7005 cluster-enabled yes cluster-config-file nodes-7005.conf cluster-node-timeout 5000 appendonly yes ``` 6. 启动Redis集群： ``` $ redis-server redis-7000.conf $ redis-server redis-7001.conf $ redis-server redis-7002.conf $ redis-server redis-7003.conf $ redis-server redis-7004.conf $ redis-server redis-7005.conf ``` 7. 创建Redis集群： ``` $ redis-cli --cluster create 127.0.0.1:7000 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005 --cluster-replicas 1 ``` 该命令创建了一个包含6个节点和1个副本的Redis集群。 8. 测试Redis集群： ``` $ redis-cli -c -p 7000 127.0.0.1:7000> set foo bar OK 127.0.0.1:7000> get foo "bar" ``` 上述步骤完成后，就可以使用Redis集群模式进行数据的分布式存储和高可用性了。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值