redis-Cluster-环境搭建

最新推荐文章于 2024-04-16 23:32:50 发布
最新推荐文章于 2024-04-16 23:32:50 发布
阅读量305 收藏 2
点赞数
分类专栏： Redis学习 缓存 redis 文章标签： 1024程序员节
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ko0491/article/details/109248981
版权
redis 同时被 3 个专栏收录
16 篇文章 0 订阅
订阅专栏
缓存
15 篇文章 0 订阅
订阅专栏
Redis学习
12 篇文章 0 订阅
订阅专栏

官方cluster分区

Redis3.0之后，Redis官方提供了完整的集群解决方案。
方案采用去中心化的方式，包括：sharding（分区）、replication（复制）、failover（故障转移）。
称为RedisCluster。
Redis5.0前采用redis-trib进行集群的创建和管理，需要ruby支持
Redis5.0可以直接使用Redis-cli进行集群的创建和管理
在这里插入图片描述
去中心化
RedisCluster由多个Redis节点组构成，是一个P2P无中心节点的集群架构，依靠Gossip协议传播的集
群。

Gossip协议
Gossip协议是一个通信协议，一种传播消息的方式。
起源于：病毒传播
Gossip协议基本思想就是：
一个节点周期性(每秒)随机选择一些节点，并把信息传递给这些节点。
这些收到信息的节点接下来会做同样的事情，即把这些信息传递给其他一些随机选择的节点
信息会周期性的传递给N个目标节点。这个N被称为fanout（扇出）
gossip协议包含多种消息，包括meet、ping、pong、fail、publish等等
在这里插入图片描述
通过gossip协议，cluster可以提供集群间状态同步更新、选举自助failover等重要的集群功能。

slot

redis-cluster把所有的物理节点映射到[0-16383]个slot上,基本上采用平均分配和连续分配的方式。
比如上图中有5个主节点，这样在RedisCluster创建时，slot槽可分配：

RedisCluster的优势

高性能
Redis Cluster 的性能与单节点部署是同级别的。
多主节点、负载均衡、读写分离
高可用
Redis Cluster 支持标准的 主从复制配置来保障高可用和高可靠。
failover
Redis Cluster 也实现了一个类似 Raft 的共识方式，来保障整个集群的可用性。
易扩展
向 Redis Cluster 中添加新节点，或者移除节点，都是透明的，不需要停机。
水平、垂直方向都非常容易扩展。
数据分区，海量数据，数据存储
原生
部署 Redis Cluster 不需要其他的代理或者工具，而且 Redis Cluster 和单机 Redis 几乎完全兼
容。

集群搭建

开放端口

# （--permanent永久生效，没有此参数重启后失效）
firewall-cmd --zone=public --add-port=6379/tcp --permanent   
firewall-cmd --zone=public --add-port=26379/tcp --permanent   
# 重新载入
firewall-cmd --reload
或者关闭防火墙
systemctl stop firewalld.service
systemctl disable firewalld.service

规则

192.168.181.128-6379:Mater1
192.168.181.129-6379:Slaver1

192.168.181.130-6379:Mater2
192.168.181.131-6379:Slaver2

192.168.181.134-6379:Mater3
192.168.181.135-6379:Slaver3

下面安装同上，但创建集群时不加入，手动使用命令加入

192.168.181.136-6379:Mater4
192.168.181.137-6379:Slaver4

下载 解压

/usr/local/redis
wget https://download.redis.io/releases/redis-5.0.9.tar.gz
tar -zxvf redis-5.0.9.tar.gz
cd redis-5.0.9

创建目录

mkdir /var/redis-cluster
编译安装
make install PREFIX=/var/redis-cluster
cp redis.conf /var/redis-cluster/bin
cd /var/redis-cluster/bin/
vim redis.conf

在这里插入图片描述
在这里插入图片描述

  • 修改
# 默认绑定的是回环地址，默认不能被其他机器访问
# bind 127.0.0.1
将`daemonize`由`no`改为`yes` 后台运行
daemonize yes

# 是否开启保护模式，由yes该为no
protected-mode no
# 打开
cluster-enable yes

全部启动

 ./redis-server redis.conf
 ps -ef | grep redis

在这里插入图片描述

创建Redis集群（创建时Redis里不要有数据）

cluster-replicas ： 1 表示1从机 前三个为主

192.168.181.128-6379:Mater1
192.168.181.129-6379:Slaver1

192.168.181.130-6379:Mater2
192.168.181.131-6379:Slaver2

192.168.181.134-6379:Mater3
192.168.181.135-6379:Slaver3
进入任意一个bin上当./redis-cli 来创建

./redis-cli --cluster create 192.168.181.128:6379 192.168.181.130:6379 192.168.181.134:6379 192.168.181.129:6379 192.168.181.131:6379 192.168.181.135:6379 --cluster-replicas 1

Can I set the above configuration? (type ‘yes’ to accept): 输入yes

./redis-cli --cluster create 192.168.181.128:6379 192.168.181.130:6379 192.168.181.134:6379 192.168.181.129:6379 192.168.181.131:6379 192.168.181.135:6379 --cluster-replicas 1

Performing hash slots allocation on 6 nodes…
Master[0] -> Slots 0 - 5460
Master[1] -> Slots 5461 - 10922
Master[2] -> Slots 10923 - 16383
Adding replica 192.168.181.131:6379 to 192.168.181.128:6379
Adding replica 192.168.181.135:6379 to 192.168.181.130:6379
Adding replica 192.168.181.129:6379 to 192.168.181.134:6379
M: 080782aa3032a569f6006e40ecbfb88ab8f39a08 192.168.181.128:6379
slots:[0-5460] (5461 slots) master
M: 0a0308f93912de51ae91a1000953dc1434cf0729 192.168.181.130:6379
slots:[5461-10922] (5462 slots) master
M: f42985b207fbb0764551a460dccca92608176265 192.168.181.134:6379
slots:[10923-16383] (5461 slots) master
S: 370bf317f89f37aead51ca52ad3c493e321b151e 192.168.181.129:6379
replicates f42985b207fbb0764551a460dccca92608176265
S: 7792153f7b8b3030d2bb81178a575fe585fdb175 192.168.181.131:6379
replicates 080782aa3032a569f6006e40ecbfb88ab8f39a08
S: ae74392a2636351b2332c4c457cb5eff83c578b7 192.168.181.135:6379
replicates 0a0308f93912de51ae91a1000953dc1434cf0729
Can I set the above configuration? (type ‘yes’ to accept): yes

Nodes configuration updated
Assign a different config epoch to each node
Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join
…

Performing Cluster Check (using node 192.168.181.128:6379)
M: 080782aa3032a569f6006e40ecbfb88ab8f39a08 192.168.181.128:6379
slots:[0-5460] (5461 slots) master
1 additional replica(s)
S: ae74392a2636351b2332c4c457cb5eff83c578b7 192.168.181.135:6379
slots: (0 slots) slave
replicates 0a0308f93912de51ae91a1000953dc1434cf0729
M: f42985b207fbb0764551a460dccca92608176265 192.168.181.134:6379
slots:[10923-16383] (5461 slots) master
1 additional replica(s)
M: 0a0308f93912de51ae91a1000953dc1434cf0729 192.168.181.130:6379
slots:[5461-10922] (5462 slots) master
1 additional replica(s)
S: 370bf317f89f37aead51ca52ad3c493e321b151e 192.168.181.129:6379
slots: (0 slots) slave
replicates f42985b207fbb0764551a460dccca92608176265
S: 7792153f7b8b3030d2bb81178a575fe585fdb175 192.168.181.131:6379
slots: (0 slots) slave
replicates 080782aa3032a569f6006e40ecbfb88ab8f39a08
[OK] All nodes agree about slots configuration.

Check for open slots…
Check slots coverage…
[OK] All 16384 slots covered.
[root@liunux128 bin]#
在这里插入图片描述
在这里插入图片描述

查看nodes文件

在这里插入图片描述
在这里插入图片描述

连接 命令客户端连接集群

./redis-cli -h 192.168.181.128 -p 6379 -c

注意：-c 表示是以redis集群方式进行连接

查看集群的命令

查看集群状态
cluster info

在这里插入图片描述

查看集群中的节点：

cluster nodes
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

扩容

启动136节点

在这里插入图片描述
只有他自己

添加新节点

## 添加主节点
./redis-cli --cluster add-node 192.168.181.136:6379 192.168.181.128:6379

第一次节点为新增的节点 第二个节点为集群中的主节点
在这里插入图片描述

在这里插入图片描述
新节点136现在已经连接上了集群， 成为集群的一份子， 并且可以对客户端的命令请求进行转向了， 但是和其他主节点相比， 新节点还有两点区别：

  • 新节点没有包含任何数据， 因为它没有包含任何哈希槽.
  • 尽管新节点没有包含任何哈希槽， 但它仍然是一个主节点， 所以在集群需要将某个从节点升级为新的主节点时， 这个新节点不会被选中。

将集群中的某些哈希桶移动到新节点里面， 新节点就会成为真正的主节点了

hash槽重新分配（数据迁移）

添加完主节点需要对主节点进行hash槽分配，这样该主节才可以存储数据。

./redis-cli --cluster reshard 192.168.181.136:6379

在这里插入图片描述
因为我们增加136为主节点后，一共存在四个主节点，为了平均分配我们需要给136分配16384除以4等于4096个节点，所以我们输入4096，按enter继续
4096个slot给那个node节点
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
输入yes
在这里插入图片描述

添加一个从节点137

启动查看只有137自己
在这里插入图片描述
将137将为136的从节点
从cluster中查看136的id
在这里插入图片描述
7579075aa56246de6c32d3918807c25165c2b01f

命令

./redis-cli --cluster add-node 新节点的ip和端口 旧节点ip和端口 --cluster-slave –
cluster-master-id 主节点id

./redis-cli --cluster add-node 192.168.181.137:6379 192.168.181.136:6379 --cluster-slave --cluster-master-id 7579075aa56246de6c32d3918807c25165c2b01f

在这里插入图片描述
在这里插入图片描述

注意：如果原来该结点在集群中的配置信息已经生成到cluster-config-file指定的配置文件中（如果
cluster-config-file没有指定则默认为nodes.conf），这时可能会报错：

[ERR] Node XXXXXX is not empty. Either the node already knows other nodes (check
with CLUSTER NODES) or contains some key in database 0

解决方法是删除生成的配置文件nodes.conf，删除后再执行./redis-cli --cluster add-node 指令

缩容
  • 命令格式
    /redis-cli --cluster del-node ip:prot nodeId
    第一个参数是任意一个节点的地址,第二个节点是你想要移除的节点地址。

删除已经占有hash槽的结点会失败，报错如下：

[ERR] Node xxx:6379 is not empty! Reshard data away and try again.
需要将该结点占用的hash槽分配出去

使用同样的方法移除主节点,不过在移除主节点前，需要确保这个主节点是空的. 如果不是空的,需要将这节点的数据重新分片到其他主节点上.

删除从节点137

./redis-cli --cluster del-node 192.168.181.137:6379 057d6ede56a81d063997446dd74c478be43c648f

删除成功
在这里插入图片描述
在这里插入图片描述
从137主机上查看redis已经关掉了,没有进程了
在这里插入图片描述

删除主节点 136

在这里插入图片描述

在这里插入图片描述

  • 先把136上的slots分配到其他主节点上
./redis-cli --cluster  reshard 192.168.181.136:6379
./redis-cli --cluster del-node 192.168.181.136:6379 7579075aa56246de6c32d3918807c25165c2b01f
  • reshard
    可能会多次
    在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

  • 下面删除
    在这里插入图片描述
./redis-cli --cluster del-node 192.168.181.136:6379  7579075aa56246de6c32d3918807c25165c2b01f

在这里插入图片描述
集群中已经没有136
在这里插入图片描述

森林森
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Docker方式部署redis-cluster
erghtt的博客
04-23 780
分享一些资料给大家，我觉得这些都是很有用的东西，大家也可以跟着来学习，查漏补缺。《Java高级面试》《Java高级架构知识》《算法知识》《互联网大厂面试真题解析、进阶开发核心学习笔记、全套讲解视频、实战项目源码讲义》点击传送门即可获取！的朋友，同时减轻大家的负担。**[外链图片转存中…(img-CI1Xp4tJ-1713825349049)][外链图片转存中…(img-ZtywFeN2-1713825349049)][外链图片转存中…(img-3Zbt9TSq-1713825349050)]
Docker搭建redis-cluster集群
最新发布
m0_65621281的博客
06-04 704
cat 1.txt #向文件1.txt输入覆盖内容（也可以：cat > 1.txt
redis-cluster伪集群搭建
CSDN_Nan_Jiang_Li的博客
04-16 342
如我们需要修改文件中的port的值，需要按空格键，在使用/port，按enter键，就找到port。如果文件中有多个port，按N键就可以找到下一个port，只到找到为止。Redis 是 c 语言开发的。安装 redis 需要 c 语言的编译环境。提示：-c表示集群模式，-a访问服务端密码，-h ip地址,-p 端口号。需要 1台Linux虚拟机，6 个 redis 实例搭建伪集群。需要运行在不同的端口 7001-7006。在解压的redis-7.2.4目录中执行。进入到redis-1的bin目录下。
搭建 redis-cluster 集群
henulmh的博客
03-22 497
三台虚拟机 CentOS Linux release 7.9.2009 (Core) Docker version 23.0.1 Docker-compose version 1.25.0-rc4主机IP： 192.168.182.137 192.168.182.135 192.168.182.136mkdir -p /usr/local/docker-redis/redis-cluster 在此目录下创建 redis-cluster.tmpl 文件并编写如下内容： 每个 Redis 集群节点都需要打开两个
redis-cluster集群搭建
weixin_58131623的博客
03-01 385
搭建redis-cluster集群并对集群扩容缩容
Redis-Cluster集群搭建
Heart_F的博客
08-09 1787
redis集群搭建
redis集群搭建之redis-cluster
weixin_45239670的博客
03-28 5715
Redis 集群介绍 Redis Cluster 提供一种Redis安装方式：数据自动在多个Redis节点间分片。 Redis Cluster 提供一定程度的高可用，在实际的环境中当某些节点失败或者不能通讯的情况下能够继续提供服务。大量节点失败的情况下集群也会停止服务（例如大多数主节点不可用）。 Redis集群提供的能力： 自动切分数据集到多个节点上。 当部分节点故障或不可达的情况下继续提供服务。 Redis 集群的端口 每个Redis集群节点需要打开两个TCP连接。端口6379提供给客户端连接，外加上
Centos7 Redis-cluster 集群搭建
qq_41062545的博客
01-12 300
Centos7 Redis-cluster 集群搭建
Redis-Cluster集群模式部署
2302_77039238的博客
12-23 420
reidis搭建集群并进行集群动态扩容缩容
Redis-cluster搭建redis高可用集群
wota5037的博客
12-31 643
首先简单介绍下 Cluster 模式的集群 1.集群对外统一。在使用集群时，只需要关注 Redis 各个节点的 IP 和端口，至于读写节点、主从等无需关注； 2.集群内部协调。主从节点在集群部署时已选举完成，除非节点挂掉，会进行重新选举。其次删除相关配置项时，也会重新选举主节点； 3.去中心化。本模式不再如哨兵、Codise 等，需要第三方监控。Cluster自行加入选举，完成主节点选举，以及读写访问控制。 Redis-cluster原理 Redis 是一个开源的 key-value ...
redis - set key value [expiration EX seconds|PX milliseconds] [NX|XX]
小城我家
09-24 8862
**set key value [expiration EX seconds|PX milliseconds] [NX|XX]** EX seconds ： 将键的过期时间设置为 seconds 秒。 执行 SET key value EX seconds 的效果等同于执行 SETEX key seconds value。 PX milliseconds ： 将键的过期时间设置为 mil...
redis-哨兵模式-搭建
小城我家
10-23 4872
哨兵模式 哨兵（sentinel）是Redis的高可用性(High Availability)的解决方案： 由一个或多个sentinel实例组成sentinel集群可以监视一个或多个主服务器和多个从服务器。 当主服务器进入下线状态时，sentinel可以将该主服务器下的某一从服务器升级为主服务器继续提供服 务，从而保证redis的高可用性 系统centos 7 下载 随便找个地方下载 cd /usr/local/redis wget https://download.redis.io/releases/r
Java jedis实现 Redis的Pub/Sub模式
小城我家
09-23 2599
在redis-cli中使用Pub/Sub 订阅 发送 接收 通配符的Pub/Sub Redis还支持通配符的订阅和发布。客户端可以订阅满足一个或多个规则的channel消息，相应的命令是PSUBSCRIBE和PUNSUBSCRIBE。接下来我们再用另一个redis-cli客户端来订阅"chi*"的channel Java中使用 监听器 package com.ghgcn.redis...
redis-发布与订阅
小城我家
10-21 1432
发布与订阅 Redis提供了发布订阅功能，可以用于消息的传输 Redis的发布订阅机制包括三个部分，publisher，subscriber和Channel 发布者和订阅者都是Redis客户端，Channel则为Redis服务器端。 发布者将消息发送到某个的频道，订阅了这个频道的订阅者就能接收到这条消息 频道/模式的订阅与退订 subscribe:订阅 subscribe channel1 channel2 … Redis客户端1订阅频道1和频道2 127.0.0.1:6379> subscribe
Redis锁的简单实现-java
小城我家
04-16 822
介绍 Redis 2.8 版本中加入了 set 指令的扩展参数，使得 setnx 和 expire 指令可以一起执行，彻底解决了分布式锁的乱象 set lock:codehole true ex 5 nx OK ... do something critical ... > del lock:codehole 上面这个指令就是 setnx 和 expire 组合在一起的原子指令，它就是分布...
redis-集群与分区
小城我家
10-22 772
集群与分区 分区是将数据分布在多个Redis实例（Redis主机）上，以至于每个实例只包含一部分数据 分区的意义 性能的提升 单机Redis的网络I/O能力和计算资源是有限的，将请求分散到多台机器，充分利用多台机器的计算能力可网络带宽，有助于提高Redis总体的服务能力。 存储能力的横向扩展 即使Redis的服务能力能够满足应用需求，但是随着存储数据的增加，单台机器受限于机器本身的存储容量，将数据分散到多台机器上存储使得Redis服务可以横向扩展 分区的方式 根据分区键（id）进行分区： 范围分
redis-proxy端分区
小城我家
10-22 623
分区 https://blog.csdn.net/ko0491/article/details/109218004 proxy端分区 在客户端和服务器端引入一个代理或代理集群，客户端将命令发送到代理上，由代理根据算法，将命令路由到相应的服务器上。常见的代理有Codis（豌豆荚）和TwemProxy（Twitter） 部署架构 Codis由豌豆荚于2014年11月开源，基于Go和C开发，是近期涌现的、国人开发的优秀开源软件之一 Codis 3.x 由以下组件组成： Codis Server：基于 redis
redis-Redis扩展功能
小城我家
10-21 621
Redis扩展功能 Lua脚本 lua是一种轻量小巧的脚本语言，用标准C语言编写并以源代码形式开放， 其设计目的是为了嵌入应用程序中，从而为应用程序提供灵活的扩展和定制功能。 Lua应用场景：游戏开发、独立应用脚本、Web应用脚本、扩展和数据库插件。 OpenRestry：一个可伸缩的基于Nginx的Web平台，是在nginx之上集成了lua模块的第三方服务器 OpenResty是一个通过Lua扩展Nginx实现的可伸缩的Web平台，内部集成了大量精良的Lua库、第三方模块以及大多数的依赖项。 用于方便地搭
redis-官方cluster分区
小城我家
10-22 455
分区与集群 https://blog.csdn.net/ko0491/article/details/109218004 proxy分区 https://blog.csdn.net/ko0491/article/details/109218776 官方cluster分区 Redis3.0之后，Redis官方提供了完整的集群解决方案。 方案采用去中心化的方式，包括：sharding（分区）、replication（复制）、failover（故障转移）。 称为RedisCluster。 Redis5.0前采用r
搭建redis集群，redis-cli --cluster create ，报段错误
06-10
这个问题可能是由于 Redis 版本过低或者安装配置不正确导致的。...如果以上方法都无法解决问题，你可以尝试使用其他方法来搭建 Redis 集群，比如使用 Redis Sentinel 或者使用第三方的 Redis 集群管理工具。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值