Redis集群搭建

最新推荐文章于 2024-09-27 21:26:22 发布
最新推荐文章于 2024-09-27 21:26:22 发布
阅读量87 收藏
点赞数
分类专栏： redis 文章标签： redis
原文链接：https://gper.club/articles/7e7e7f7ff3g5bgcdg60
版权

Redis集群搭建

搭建步骤

这里我们在同一台机器上搭建3主3从集群。基于单机部署，配置文件上添加和修改配置。

机器的ip地址：192.168.0.100，进行如下操作

cd /usr/local/soft
mkdir redis-cluster
cd redis-cluster
mkdir 7291 7292 7293 7294 7295 7296

复制redis配置文件到7291目录

cp /usr/local/soft/redis/redis.conf /usr/local/soft/redis-cluster/7291

修改7291的redis.conf配置文件，内容：

cd /usr/local/soft/redis-cluster/7291
vim redis.conf

redis.conf内容如下：

port 7291
daemonize yes
protected-mode no
dir /usr/local/soft/redis-cluster/7291/
cluster-enabled yes
cluster-config-file nodes-7291.conf
cluster-node-timeout 5000
appendonly yes
pidfile /var/run/redis_7291.pid

注意，外网集群要添加这个配置：

# 实际给各节点网卡分配的IP（公网IP）
cluster-announce-ip 47.xx.xx.xx
# 节点映射端口
cluster-announce-port ${PORT}
# 节点总线端口
cluster-announce-bus-port 1${PORT}

把7291下的redis.conf复制到其他5个目录。

cd /usr/local/soft/redis-cluster/7291
cp redis.conf ../7292
cp redis.conf ../7293
cp redis.conf ../7294
cp redis.conf ../7295
cp redis.conf ../7296

批量替换内容:

cd /usr/local/soft/redis-6.0.9/redis-cluster
sed -i 's/7291/7292/g' 7292/redis.conf
sed -i 's/7291/7293/g' 7293/redis.conf
sed -i 's/7291/7294/g' 7294/redis.conf
sed -i 's/7291/7295/g' 7295/redis.conf
sed -i 's/7291/7296/g' 7296/redis.conf

启动6个Redis节点

cd /usr/local/soft/redis/
./src/redis-server ../redis-cluster/7291/redis.conf
./src/redis-server ../redis-cluster/7292/redis.conf
./src/redis-server ../redis-cluster/7293/redis.conf
./src/redis-server ../redis-cluster/7294/redis.conf
./src/redis-server ../redis-cluster/7295/redis.conf
./src/redis-server ../redis-cluster/7296/redis.conf

查看是否启动6个进程

ps -ef|grep redis

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-NIiaAhpn-1624874836467)(F:\private-workspace\typora\personal-data\02_private\003_redis\image\17964f81af79488fb47bb7763248557e.png)]

创建集群

注意用绝对IP，不要用127.0.0.1

cd /usr/local/soft/redis/src/
redis-cli --cluster create 127.0.0.1:7291 127.0.0.1:7292 127.0.0.1:7293 127.0.0.1:7294 127.0.0.1:7295 127.0.0.1:7296 --cluster-replicas 1

Redis会给出一个预计的方案，对6个节点分配3主3从，如果认为没有问题，输入yes确认

>>> Performing hash slots allocation on 6 nodes...
Master[0] -> Slots 0 - 5460
Master[1] -> Slots 5461 - 10922
Master[2] -> Slots 10923 - 16383
Adding replica 127.0.0.1:7295 to 127.0.0.1:7291
Adding replica 127.0.0.1:7296 to 127.0.0.1:7292
Adding replica 127.0.0.1:7294 to 127.0.0.1:7293
>>> Trying to optimize slaves allocation for anti-affinity
[WARNING] Some slaves are in the same host as their master
M: 2058bd8fc0def0abe746816221c5b87f616e78ae 127.0.0.1:7291
   slots:[0-5460] (5461 slots) master
M: 4e41266f2fb7944420d66235475318f5f9526cd8 127.0.0.1:7292
   slots:[5461-10922] (5462 slots) master
M: 9ff8ac86b5faf3c0eca149f090800efea3b142e0 127.0.0.1:7293
   slots:[10923-16383] (5461 slots) master
S: 8383088d3ce75732fc9acb31ca4bce68833028f7 127.0.0.1:7294
   replicates 9ff8ac86b5faf3c0eca149f090800efea3b142e0
S: d185adbfa62133e30cee291b028eff451502ecca 127.0.0.1:7295
   replicates 2058bd8fc0def0abe746816221c5b87f616e78ae
S: 634709cf14809976ea40b65615f816e31d424748 127.0.0.1:7296
   replicates 4e41266f2fb7944420d66235475318f5f9526cd8
Can I set the above configuration? (type 'yes' to accept):

注意看slot的分布：

7291  [0-5460] (5461个槽) 
7292  [5461-10922] (5462个槽) 
7293  [10923-16383] (5461个槽)

输入yes确认，集群创建完成

>>> Performing Cluster Check (using node 127.0.0.1:7291)
M: 2058bd8fc0def0abe746816221c5b87f616e78ae 127.0.0.1:7291
   slots:[0-5460] (5461 slots) master
   1 additional replica(s)
S: 8383088d3ce75732fc9acb31ca4bce68833028f7 127.0.0.1:7294
   slots: (0 slots) slave
   replicates 9ff8ac86b5faf3c0eca149f090800efea3b142e0
S: d185adbfa62133e30cee291b028eff451502ecca 127.0.0.1:7295
   slots: (0 slots) slave
   replicates 2058bd8fc0def0abe746816221c5b87f616e78ae
M: 9ff8ac86b5faf3c0eca149f090800efea3b142e0 127.0.0.1:7293
   slots:[10923-16383] (5461 slots) master
   1 additional replica(s)
M: 4e41266f2fb7944420d66235475318f5f9526cd8 127.0.0.1:7292
   slots:[5461-10922] (5462 slots) master
   1 additional replica(s)
S: 634709cf14809976ea40b65615f816e31d424748 127.0.0.1:7296
   slots: (0 slots) slave
   replicates 4e41266f2fb7944420d66235475318f5f9526cd8
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.

重置集群的方式是在每个节点上个执行cluster reset，然后重新创建集群

批量写入值

cd /usr/local/soft/redis-6.0.9/redis-cluster/
vim setkey.sh

脚本内容

#!/bin/bash
for ((i=0;i<20000;i++))
do
echo -en "helloworld" | redis-cli -h 127.0.0.1 -p 7291 -c -x set name$i >>redis.log
done

chmod +x setkey.sh
./setkey.sh

连接到客户端

redis-cli -p 7291
redis-cli -p 7292
redis-cli -p 7293

每个节点分布的数据

127.0.0.1:7291> dbsize
(integer) 6652
127.0.0.1:7292> dbsize
(integer) 6683
127.0.0.1:7293> dbsize
(integer) 6665

新增节点(新增7297节点，新节点add-node加入集群后，是没有slots的)：

#  add-node       new_host:new_port existing_host:existing_port
#                 --cluster-slave
#                 --cluster-master-id <arg>
redis-cli --cluster add-node 127.0.0.1:7297 127.0.0.1:7291

重新分片：

# redis-cli --cluster reshard 目标节点（IP端口）
redis-cli --cluster reshard 127.0.0.1:7297

输入需要分配的哈希槽的数量（比如500)，和哈希槽的来源节点（可以输入all或者id)。

cluster管理命令

redis-cli --cluster help

Cluster Manager Commands:
  create         host1:port1 ... hostN:portN
                 --cluster-replicas <arg>
  check          host:port
                 --cluster-search-multiple-owners
  info           host:port
  fix            host:port
                 --cluster-search-multiple-owners
  reshard        host:port
                 --cluster-from <arg>
                 --cluster-to <arg>
                 --cluster-slots <arg>
                 --cluster-yes
                 --cluster-timeout <arg>
                 --cluster-pipeline <arg>
                 --cluster-replace
  rebalance      host:port
                 --cluster-weight <node1=w1...nodeN=wN>
                 --cluster-use-empty-masters
                 --cluster-timeout <arg>
                 --cluster-simulate
                 --cluster-pipeline <arg>
                 --cluster-threshold <arg>
                 --cluster-replace
  add-node       new_host:new_port existing_host:existing_port
                 --cluster-slave
                 --cluster-master-id <arg>
  del-node       host:port node_id
  call           host:port command arg arg .. arg
  set-timeout    host:port milliseconds
  import         host:port
                 --cluster-from <arg>
                 --cluster-copy
                 --cluster-replace
  help           

For check, fix, reshard, del-node, set-timeout you can specify the host and port of any working node in the cluster.

集群命令

cluster info ：打印集群的信息

cluster nodes ：列出集群当前已知的所有节点（node），以及这些节点的相关信息。

cluster meet ：将 ip 和 port 所指定的节点添加到集群当中，让它成为集群的一份子。

cluster forget <node_id> ：从集群中移除 node_id 指定的节点(保证空槽道)。

cluster replicate <node_id> ：将当前节点设置为 node_id 指定的节点的从节点。

cluster saveconfig ：将节点的配置文件保存到硬盘里面。

槽slot命令

cluster addslots [slot …] ：将一个或多个槽（slot）指派（assign）给当前节点。

cluster delslots [slot …]：移除一个或多个槽对当前节点的指派。

cluster flushslots ：移除指派给当前节点的所有槽，让当前节点变成一个没有指派任何槽的节点。

cluster setslot node <node_id> ：将槽 slot 指派给 node_id 指定的节点，如果槽已经指派给另一个节点，那么先让另一个节点删除该槽>，然后再进行指派。

cluster setslot migrating <node_id> ：将本节点的槽 slot 迁移到 node_id 指定的节点中。

cluster setslot importing <node_id> ：从 node_id 指定的节点中导入槽 slot 到本节点。

cluster setslot stable ：取消对槽 slot 的导入（import）或者迁移（migrate）。

键命令

cluster keyslot ：计算键 key 应该被放置在哪个槽上。

cluster countkeysinslot ：返回槽 slot 目前包含的键值对数量。

cluster getkeysinslot：返回 count 个 slot 槽中的键

fanger8848
关注
专栏目录
redis 集群搭建
09-30
redis 集群搭建 ，单节点，集群搭建，工具包
Redis 集群搭建
qq_36838700的博客
07-23 1331
使用 Redis 集群进行扩展 |文档请注意，按预期工作的小集群必须包含 至少三个主节点。对于部署，我们强烈建议 一个六节点集群，包含三个主节点和三个副本。三台服务器各部署一个主节点、一个从节点，同一台服务器上不是直接主从关系。操作系统Centos 7Centos 7Centos 7内核版本主机名称node-01node-02node-03角色IP地址Redis7.2.57.2.57.2.5。
redis集群搭建
睡竹的博客
04-05 2194
redis集群搭建 cluster-require-full-coverage
redis集群搭建（非常详细，适合新手）
热门推荐
橙子君的博客
10-01 37万+
redis集群搭建 在开始redis集群搭建之前，我们先简单回顾一下redis单机版的搭建过程 下载redis压缩包，然后解压压缩文件； 进入到解压缩后的redis文件目录（此时可以看到Makefile文件），编译redis源文件； 把编译好的redis源文件安装到/usr/local/redis目录下，如果/local目录下没有redis目录，会自动新建redis目录； 进入/usr/loca...
【redis】redis集群搭建学习
zerotoall的博客
08-12 1209
一、Redis Cluster 分布式集群 1.Redis集群是一个可以在多个Redis节点之间进行数据共享的设施（installation） 2.Redis集群不支持那些需要同时处理多个键的Redis命令，因为执行这些命令需要在多个Redis节点 　　 1.什么是Redis Cluster 　　 2.Redis Cluster的特点 　　 3.槽的概念 　　 4.redis故障转移 　 二、redis集群搭建（方法一） 　　 须知 　 三、使用工具搭建redis集群（方法二）
Redis集群搭建与原理分析
qq_45061342的博客
08-11 1380
Redis Cluster 将所有数据划分为 16384 个 slots(槽位)，每个节点负责其中一部分槽位。槽位的信息存储于每个节点中。 当 Redis Cluster 的客户端来连接集群时，它也会得到一份集群的槽位配置信息并将其缓存在客户端本地。这样当客户端要查找某个 key 时，可以直接定位到目标节点。同时因为槽位的信息可能会存在客户端与服务器不一致的情况，还需要纠正机制来实现槽位信息的校验调整。
Redis集群搭建linux
做一个乐于分享的程序员
08-17 772
Redis 集群搭建
redis集群搭建，哨兵集群搭建
dxh9231028的博客
07-30 541
修改哨兵配置不需要主动声明集群，只需要多个节点监听同一节点则就是集群结构，一个节点也能监听多个主机，只需要配置时多配置一个sentinel monitor即可（主机名不能重复），具体配置如下，如果看不懂注释可以看我的另一篇文章。三、创建多个配置文件（我这里用一台机器搭配集群，所以需要创建多个端口的redis服务，如果是多台机器搭建集群则不需要）通过redis-cli链接一个redis服务，使用cluster nodes命令查看，发现三个节点，集群搭建成功。四、启动所有服务，启动集群。
redis集群搭建（三主三从）
海贼王的博客
08-07 1408
这个往往是由于主node移除了，但是并没有移除node上面的slot，从而导致了slot总数没有达到16384，其实也就是slots分布不正确。所以在删除节点的时候一定要注意删除的是否是Master主节点。每台机器有两个节点，一共六个节点(三主三从)，主节点和从节点不在同一台机器上，有条件当然可以选择使用6台机器。拷贝bin/redis.conf 6379和6380的目录下面。发现有四个节点不在集群当中了，大概可能和设置密码有关系。启动与停止与开机自启动。启动与停止与开机自启动。并分别修改他们的端口。
Redis集群搭建及原理详解
core815的专栏
06-18 1534
在redis3.0以前的版本要实现集群一般是借助哨兵sentinel工具来监控master节点的状态，如果master节点异常，则会做主从切换，将某一台slave作为master，哨兵的配置略微复杂，并且性能和高可用性等各方面表现一般，特别是在主从切换的瞬间存在访问瞬断的情况，而且哨兵模式只有一个主节点对外提供服务，没法支持很高的并发，且单个主节点内存也不宜设置得过大，否则会导致持久化文件过大，影响数据恢复或主从同步的效率。
docker 实现redis集群搭建
08-19
"docker 实现redis集群搭建" 一、Redis Cluster 概念 Redis Cluster 是 Redis 的分布式解决方案，旨在解决 Redis 单机中心化的问题。它将整个数据集按照分区规则映射到多个节点上，使得 Redis 能够水平扩展以应对...
Redis集群搭建及维护文档.docx
03-31
以下是一份简化的Redis集群搭建步骤： 1. **环境准备**： - 确保你有一个兼容的Linux环境，例如CentOS 7（64位）。 - 下载Redis的源代码包，如redis-4.0.6.tar.gz。 2. **安装Redis单节点**： - 解压Redis源...
【Redis 源码】6AOF持久化
qq_17821591的博客
09-27 684
RDB (快照)定期保存内存中的数据到磁盘。文件紧凑，适合备份和灾难恢复。恢复速度快，但可能丢失最后一次快照之后的数据。AOF (日志)记录每个写操作，并追加到文件中。可以设置不同的 fsync 策略来平衡性能和数据安全性。数据更完整，但文件较大，恢复速度较慢。
Redis中BigKey与MoreKey优化笔记
最新发布
ddf128的博客
09-27 410
Redis中的BigKey指的是那些值（value）特别大的键（key），这可能包括大的字符串或者包含大量元素的集合类型（如list、set、hash、zset等）。BigKey的存在可能会导致Redis的性能问题，因为Redis是单线程操作的，处理BigKey时可能会阻塞其他操作，影响整体性能。在Redis中，MoreKey问题通常指的是当数据库中的key数量非常多时，使用如KEYS *这样的命令去检索所有的key，这会导致Redis服务阻塞，影响正常业务。因为Redis是单线程操作的，执行这类命令时会占
微服务Redis解析部署使用全流程
m0_71240584的博客
09-26 883
/判断是否有key所对应的值，有则返回true，没有则返回false//有则取出key值所对应的值//删除单个key值//其中keys:Collection keys//将当前传入的key值序列化为byte[]类型//设置过期时间//设置过期时间//查找匹配的key值，返回一个Set集合类型//返回传入key所存储的值的类型//如果旧值存在时，将旧值改为新值//从redis中随机取出一个key//返回当前key所对应的剩余过期时间。
推荐一款开源的Redis桌面客户端
xiangzhihong8的专栏
09-23 719
TinyRDM 是一个现代化的、轻量级的跨平台 Redis 桌面客户端，能在 Mac、Windows 和 Linux 系统上使用。它有着现代化的设计风格，界面既简洁又清晰，操作起来方便又高效。不管是刚开始接触的新手，还是经验丰富的开发者，都能很容易地学会使用，能够迅速地管理和操作 Redis 数据库。
Redis集群搭建与运维指南
"该文档是关于Redis集群搭建的详细指南，涵盖了从Redis的基本概念到集群配置、运维操作、命令详解以及调优等多个方面。" 在深入探讨Redis集群搭建之前，我们先来理解一下Redis和Redis-cluster。Redis是一个开源的、...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值