redis：集群

最新推荐文章于 2022-09-26 09:55:53 发布
最新推荐文章于 2022-09-26 09:55:53 发布
阅读量294 收藏
点赞数
分类专栏： 高性能mysql
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43384009/article/details/104823881
版权

目录标题

1. 集群

1. [root@server4 redis]# /etc/init.d/redis_6379 stop
Stopping ...
Redis stopped

2. [root@server4 redis]# mkdir /usr/local/rediscluster
[root@server4 redis]# cd /usr/local/rediscluster
[root@server4 rediscluster]# mkdir 700{1..6}
[root@server4 rediscluster]# ls
7001  7002  7003  7004  7005  7006
[root@server4 rediscluster]# cd 7001/

7001:
3. [root@server4 7001]# vim redis.conf
port 7001
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
appendonly yes

pidfile "/usr/local/rediscluster/7001/redis.pid"
logfile "/usr/local/rediscluster/7001/redis.log"
daemonize yes
dir "/usr/local/rediscluster/7001"

4. [root@server4 7001]# redis-server redis.conf 
[root@server4 7001]# ps aux
root      6686  0.0  0.7 153824  7696 ?        Ssl  14:11   0:00 redis-server *:7001 [cluster]

7002:
1. [root@server4 7001]# cp redis.conf /usr/local/rediscluster/7002
2. [root@server4 rediscluster]# cd 7002
3. [root@server4 7002]# vim redis.conf 
:%s/7001/7002/g
4. [root@server4 7002]# redis-server redis.conf 
5. [root@server4 7002]# ps aux
root      6704  0.0  0.7 153824  7704 ?        Ssl  14:18   0:00 redis-server *:7002 [cluster]

7003:
1. [root@server4 rediscluster]# cd 7003
[root@server4 7003]# vim redis.conf 
:%s/7001/7003/g
2. [root@server4 7003]# redis-server redis.conf
3. [root@server4 7003]# ps aux
root      6714  0.0  0.7 153824  7696 ?        Ssl  14:22   0:00 redis-server *:7003 [cluster]


7004:
1. [root@server4 rediscluster]# cd 7004
[root@server4 7004]# vim redis.conf 
:%s/7001/7004/g
2. [root@server4 7004]# redis-server redis.conf
3. [root@server4 7004]# ps aux
root      6722  0.0  0.7 153824  7696 ?        Ssl  14:24   0:00 redis-server *:7004 [cluster]


7005:
1. [root@server4 rediscluster]# cd 7005
[root@server4 7005]# vim redis.conf 
:%s/7001/7005/g
2. [root@server4 7005]# redis-server redis.conf
3. [root@server4 7005]# ps aux
root      6731  0.0  0.7 153824  7696 ?        Ssl  14:27   0:00 redis-server *:7005 [cluster]


7006:
1. [root@server4 rediscluster]# cd 7006
[root@server4 7006]# vim redis.conf 
:%s/7001/7006/g
2. [root@server4 7006]# redis-server redis.conf
3. [root@server4 7006]# ps aux
root      6738  0.0  0.7 153824  7696 ?        Ssl  14:28   0:00 redis-server *:7006 [cluster]

测试集群是否可用：

[root@server4 7006]# redis-cli -p 7001  # 可用的话cluster为enabled状态
127.0.0.1:7001> info
# Cluster
cluster_enabled:1

配置集群：

1. [root@server4 ~]# cd redis-5.0.3
[root@server4 redis-5.0.3]# cd src/
[root@server4 src]# cp redis-trib.rb /usr/local/bin

2. [root@server4 src]# yum install -y ruby

3. [root@server4 src]# redis-cli --cluster create --cluster-replicas 1 127.0.0.0:7001 127.0.0.0:7002 127.0.0.0:7003 127.0.0.0:7004 127.0.0.0:7005 127.0.0.0:7006
Could not connect to Redis at 127.0.0.0:7001: Network is unreachable
[root@server4 src]# redis-cli --cluster create --cluster-replicas 1 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005 127.0.0.1:7006
>>> Performing hash slots allocation on 6 nodes...
Master[0] -> Slots 0 - 5460
Master[1] -> Slots 5461 - 10922
Master[2] -> Slots 10923 - 16383
Adding replica 127.0.0.1:7004 to 127.0.0.1:7001
Adding replica 127.0.0.1:7005 to 127.0.0.1:7002
Adding replica 127.0.0.1:7006 to 127.0.0.1:7003
>>> Trying to optimize slaves allocation for anti-affinity
[WARNING] Some slaves are in the same host as their master
M: 2290801f52bec7ac4e7f154182e0981b3b7ec7f6 127.0.0.1:7001
   slots:[0-5460] (5461 slots) master
M: ece647bd9c4e2081ec54abd5de9d03c9c570c79c 127.0.0.1:7002
   slots:[5461-10922] (5462 slots) master
M: 0bf2176eac1dcc865d99517d2c9da82af8815a51 127.0.0.1:7003
   slots:[10923-16383] (5461 slots) master
S: 79ab354e62d1be9f21abaf860ef53bf599b37e36 127.0.0.1:7004
   replicates 0bf2176eac1dcc865d99517d2c9da82af8815a51
S: 1de90d74d18331d7e8f7ce31d5dbce9435dbc451 127.0.0.1:7005
   replicates 2290801f52bec7ac4e7f154182e0981b3b7ec7f6
S: 26d205a5fb04bd53975771259c0a3668186c9643 127.0.0.1:7006
   replicates ece647bd9c4e2081ec54abd5de9d03c9c570c79c
Can I set the above configuration? (type 'yes' to accept):  yes
>>> Nodes configuration updated
>>> Assign a different config epoch to each node
>>> Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join
....
>>> Performing Cluster Check (using node 127.0.0.1:7001)
M: 2290801f52bec7ac4e7f154182e0981b3b7ec7f6 127.0.0.1:7001
   slots:[0-5460] (5461 slots) master
   1 additional replica(s)
S: 1de90d74d18331d7e8f7ce31d5dbce9435dbc451 127.0.0.1:7005
   slots: (0 slots) slave
   replicates 2290801f52bec7ac4e7f154182e0981b3b7ec7f6
S: 26d205a5fb04bd53975771259c0a3668186c9643 127.0.0.1:7006
   slots: (0 slots) slave
   replicates ece647bd9c4e2081ec54abd5de9d03c9c570c79c
M: 0bf2176eac1dcc865d99517d2c9da82af8815a51 127.0.0.1:7003
   slots:[10923-16383] (5461 slots) master
   1 additional replica(s)
S: 79ab354e62d1be9f21abaf860ef53bf599b37e36 127.0.0.1:7004
   slots: (0 slots) slave
   replicates 0bf2176eac1dcc865d99517d2c9da82af8815a51
M: ece647bd9c4e2081ec54abd5de9d03c9c570c79c 127.0.0.1:7002
   slots:[5461-10922] (5462 slots) master
   1 additional replica(s)
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.

引入槽的概念：
在这里插入图片描述
在这里插入图片描述
测试：

[root@server4 src]# redis-cli info 127.0.0.1:7001
Could not connect to Redis at 127.0.0.1:6379: Connection refused
[root@server4 src]# redis-cli --cluster info 127.0.0.1:7001
127.0.0.1:7001 (2290801f...) -> 0 keys | 5461 slots | 1 slaves.
127.0.0.1:7003 (0bf2176e...) -> 0 keys | 5461 slots | 1 slaves.
127.0.0.1:7002 (ece647bd...) -> 0 keys | 5462 slots | 1 slaves.
[OK] 0 keys in 3 masters.
0.00 keys per slot on average.

[root@server4 src]# redis-cli -c -p 7001
127.0.0.1:7001> set name jy
-> Redirected to slot [5798] located at 127.0.0.1:7002
OK
127.0.0.1:7002> get name
"jy"
127.0.0.1:7002> exit

[root@server4 src]# redis-cli -c -p 7001
127.0.0.1:7001> get name
-> Redirected to slot [5798] located at 127.0.0.1:7002
"jy"
127.0.0.1:7002> SHUTDOWN  # 关掉7002
not connected> exit

[root@server4 src]# redis-cli --cluster info 127.0.0.1:7001
Could not connect to Redis at 127.0.0.1:7002: Connection refused
127.0.0.1:7001 (2290801f...) -> 0 keys | 5461 slots | 1 slaves.
127.0.0.1:7006 (26d205a5...) -> 1 keys | 5462 slots | 0 slaves.   # 7002的备机7006接替了7002
127.0.0.1:7003 (0bf2176e...) -> 0 keys | 5461 slots | 1 slaves.
[OK] 1 keys in 3 masters.
0.00 keys per slot on average.

[root@server4 src]# redis-cli -c -p 7001
127.0.0.1:7001> get name
-> Redirected to slot [5798] located at 127.0.0.1:7006  # 在7006上可以继续查到数据
"jy"
127.0.0.1:7006> shutdown   # 关闭7006
(0.87s)
not connected> exit
[root@server4 src]# redis-cli --cluster info 127.0.0.1:7001
Could not connect to Redis at 127.0.0.1:7006: Connection refused
Could not connect to Redis at 127.0.0.1:7002: Connection refused
127.0.0.1:7001 (2290801f...) -> 0 keys | 5461 slots | 1 slaves.
127.0.0.1:7003 (0bf2176e...) -> 0 keys | 5461 slots | 1 slaves.
[OK] 0 keys in 2 masters.
0.00 keys per slot on average.

恢复集群：

7002:
1. [root@server4 src]# cd /usr/local/rediscluster/
[root@server4 rediscluster]# cd 7002

2. [root@server4 7002]# cat appendonly.aof    # 文件中包含之前在7002上的操作
*2
$6
SELECT
$1
0
*3
$3
set
$4
name
$2
jy

3. [root@server4 7002]# redis-server redis.conf

7006:
1. [root@server4 7002]# cd ../7006
[root@server4 7006]# cat appendonly.aof 
REDIS0009�	redis-ver5.0.3�
redis-bits�@�ctime��i^used-mem�xq'�
                                    aof-preamble��|�ѯG��*2
$6
SELECT
$1
0
*3
$3
set
$4
name
$2
jy

2. [root@server4 7006]# redis-server redis.conf

恢复7002和7006，并且7006成为主

[root@server4 7006]# redis-cli --cluster info 127.0.0.1:7001
127.0.0.1:7001 (2290801f...) -> 0 keys | 5461 slots | 1 slaves.
127.0.0.1:7006 (26d205a5...) -> 1 keys | 5462 slots | 1 slaves.
127.0.0.1:7003 (0bf2176e...) -> 0 keys | 5461 slots | 1 slaves.
[OK] 1 keys in 3 masters.
0.00 keys per slot on average.

2. 添加新的节点

1. [root@server4 ~]# cd /usr/local/rediscluster/
[root@server4 rediscluster]# ls
7001  7002  7003  7004  7005  7006
[root@server4 rediscluster]# mkdir 7007
[root@server4 rediscluster]# mkdir 7008
[root@server4 rediscluster]# cp 7001/redis.conf 7007
[root@server4 rediscluster]# cp 7001/redis.conf 7008

7007:
[root@server4 7007]# vim redis.conf 
[root@server4 7007]# redis-server redis.conf 
:%s/7001/7007/g


7008:
[root@server4 7008]# vim redis.conf 
[root@server4 7008]# redis-server redis.conf 
:%s/7001/7008/g

给集群添加节点：

1. [root@server4 7008]# redis-cli --cluster add-node 127.0.0.1:7007 127.0.0.1:7001

2. [root@server4 7008]# redis-cli -c -p 7007
127.0.0.1:7007> cluster nodes
ece647bd9c4e2081ec54abd5de9d03c9c570c79c 127.0.0.1:7002@17002 slave 26d205a5fb04bd53975771259c0a3668186c9643 0 1583997042000 7 connected
0bf2176eac1dcc865d99517d2c9da82af8815a51 127.0.0.1:7003@17003 master - 0 1583997043000 3 connected 10923-16383
2290801f52bec7ac4e7f154182e0981b3b7ec7f6 127.0.0.1:7001@17001 master - 0 1583997043871 1 connected 0-5460
1de90d74d18331d7e8f7ce31d5dbce9435dbc451 127.0.0.1:7005@17005 slave 2290801f52bec7ac4e7f154182e0981b3b7ec7f6 0 1583997043000 1 connected
79ab354e62d1be9f21abaf860ef53bf599b37e36 127.0.0.1:7004@17004 slave 0bf2176eac1dcc865d99517d2c9da82af8815a51 0 1583997044071 3 connected
26d205a5fb04bd53975771259c0a3668186c9643 127.0.0.1:7006@17006 master - 0 1583997042000 7 connected 5461-10922
027e431dba09e20712afc3e7a29397f15b476a08 127.0.0.1:7007@17007 myself,master - 0 1583997042000 0 connected

3. [root@server4 7008]# redis-cli --cluster add-node 127.0.0.1:7008 127.0.0.1:7007 --cluster-slave --cluster-master-id 027e431dba09e20712afc3e7a29397f15b476a08

查看集群状态：

[root@server4 7008]# redis-cli --cluster info 127.0.0.1:7001 
127.0.0.1:7001 (2290801f...) -> 0 keys | 5461 slots | 1 slaves.
127.0.0.1:7006 (26d205a5...) -> 1 keys | 5462 slots | 1 slaves.
127.0.0.1:7003 (0bf2176e...) -> 0 keys | 5461 slots | 1 slaves.
127.0.0.1:7007 (027e431d...) -> 0 keys | 0 slots | 1 slaves.
[OK] 1 keys in 4 masters.
0.00 keys per slot on average

但是7007没有数据槽
给7007均分数据槽：

1. [root@server4 7008]# redis-cli --cluster rebalance --cluster-threshold 1 --cluster-use-empty-masters 127.0.0.1:7001

2. [root@server4 7008]# redis-cli --cluster info 
127.0.0.1:7001127.0.0.1:7001 (2290801f...) -> 0 keys | 4096 slots | 1 slaves.
127.0.0.1:7006 (26d205a5...) -> 0 keys | 4096 slots | 1 slaves.
127.0.0.1:7003 (0bf2176e...) -> 0 keys | 4096 slots | 1 slaves.
127.0.0.1:7007 (027e431d...) -> 1 keys | 4096 slots | 1 slaves.
[OK] 1 keys in 4 masters.
0.00 keys per slot on average.

3. [root@server4 7008]# redis-cli -c -p 7008
127.0.0.1:7008> get name
-> Redirected to slot [5798] located at 127.0.0.1:7007
"jy"
127.0.0.1:7007>
weixin_43384009
关注
专栏目录
在K8S上部署Redis 集群
tianyouyexin的博客
07-15 4499
1.准备操作 本次部署主要基于该项目：https://github.com/zuxqoj/kubernetes-redis-cluster wget https://github.com/zuxqoj/kubernetes-redis-cluster/archive/master.zip unzip master.zip 其包含了两种部署Redis集群的方式： StatefulSet Servi...
Redis：集群（cluster）
m0_46669446的博客
01-23 3964
redis：持久化 redis：主从复制 redis：哨兵 redis：集群 1 概述 集群，即Redis Cluster，是Redis 3.0开始引入的分布式存储方案。 集群由多个节点(Node)组成，Redis的数据分布在这些节点中。集群中的节点分为主节点和从节点：只有主节点负责读写请求和集群信息的维护；从节点只进行主节点数据和状态信息的复制。 集群的作用，可以归纳为两点： 数据分区：数据分区(或称数据分片)是集群最核心的功能。 集群将数据分散到多个节点，一方面突破了Redis单机内存大小的限制，
在 KubeSphere 中部署高可用 Redis 集群
KubeSphere
09-26 1216
作者：余生大大，大数据开发工程师，云原生爱好者，KubeSphere 社区用户。 前言 Redis 是在开发过程中经常用到的缓存中间件，在生产环境中为了考虑稳定性和高可用一般为集群模式的部署。 常规部署在虚拟机上的方式配置繁琐并且需要手动重启节点，而使用 K8s 进行 Redis 集群的部署有以下优点： 安装便捷：使用镜像或者 yaml 配置文件即可一件安装 自动调度：容器挂掉后会自动调度重启和资源分配 缩扩容方便：在 扩容、缩容 方面的优点无需多说，一键伸缩 稳定高效：K8s 在整个集群上进行调度，
k8s部署redis集群
liangkaiping0525的博客
07-06 5672
k8s部署Redis集群
k8s上部署高可用redis集群--三主三从
web18484626332的博客
04-05 4886
K8S搭建三主三从高可用redis集群 一、创建存储卷 二、创建PV 三、创建configmap 四、创建headless service 五、创建redis集群节点 六、初始化redis集群 七、创建用于访问的service 八、redis主从切换测试 本方案采用StatefulSet进行redis的部署。它为了解决有状态服务的问题，它所管理的Pod拥有固定的Pod名称，启停顺序。在Deployment中，与之对应的服务是service，而在StatefulSet中与之对应的headless serv
Kubernetes09-部署redis高可用集群（StatefulSet）
d495435207的博客
09-18 1555
本文实现了redis高可用集群的搭建【StatefulSet】，并完成集群的测试和高可用集群主从测试。
Redis集群管理工具Redis::Sentinel.zip
07-19
Redis-sentinel是Redis的作者antirez完成的，因为Redis实例在各个大公司的应用，每个公司都需要一个Redis集群的管理工具，被迫都自己写管理工具来管理Redis集群，antirez考虑到社区的急迫需要(详情)，花了几个星期写...
ansible-redis:Ansible角色，用于设置具有集群支持的Redis
05-15
Ansible角色，可在独立设置或集群中管理Redis 快速开始 设置基本，无密码，仅回送，独立的Redis设置绝对不需要任何变量。 只需将其包含在剧本中即可： - name: install redis hosts: all roles: stone-payments....
scala-redis：一个scala库，用于在客户端使用一致的哈希连接到redis服务器或redis节点集群
02-05
1. **一致性哈希**：Scala-Redis实现了客户端的一致性哈希算法，这意味着当Redis集群中的节点增加或减少时，只有少量的键会受到影响，从而保持了服务的稳定性。 2. **简单易用的API**：Scala-Redis提供了丰富的API...
windows环境下配置redis6集群
06-10
集群已配置好，点击start.bat即可开启，可以按个人需求添加或删除redis服务器个数。 注意：由于本人配置redis.conf中的路径使用的是绝对路径，当前redis安装目录的父目录为D:\InstallDir，可以在每个配置文件中修改...
k8s部署redis集群（6节点，3主3从集群模式）
MssGuo的博客
08-05 1万+
k8部署redis集群（6节点，3主3从）
Redis主从模式集群部署
z530234020的博客
02-24 534
redis集群部署 1.创建NFS存储(ubuntu环境下) 1.1 NFS的安装 命令⾏输⼊命令：apt-get install nfs-kernel-server ####1.2 启动NFS服务 命令⾏输⼊命令：etc/init.d/nfs-kernel-server restart 1.3 修改nfs配置⽂件 修改/etc/exports⽂件，如下图所示 ![在这里插入图片描述](https://img-blog.csdnimg.cn/20210224223205794.png?x-
k8s部署redis两主两从集群并初始化集群
xiaxia2022的博客
10-15 1011
1. 部署ceph存储创建pv的storageClass 2. 配置redis.conf配置文件到并挂载到configmap # cat redis-configmap.yaml --- apiVersion: v1 kind: ConfigMap metadata: name: redis-conf namespace: redis-test data: update-node.sh: | #!/bin/sh REDIS_NODES="/data/nodes.conf
K8S搭建redis主从集群
zxc_123_789的博客
02-14 5016
文章目录1. 创建NFS存储2. 创建PV3. 创建Configmap4. 创建Headless service5. 创建Redis集群节点(v=6.2.6)6. 初始化Redis集群7. 创建用于访问Service 1. 创建NFS存储 创建NFS存储主要是为了给Redis提供稳定的后端存储，当Redis的Pod重启或迁移后，依然能获得原先的数据。这里，我们先要创建NFS，然后通过使用PV为Redis挂载一个远程的NFS路径。 安装NFS #将需要在挂载的服务器中安装NFS yum -y install
KubeSphere安装redis集群，全程超带劲
AnNanDu的博客
09-20 2573
redis是在开发过程中经常用到的缓存中间件，在生产环境中为了考虑稳定性和高可用一般为集群模式的部署。常规部署在虚拟机上的方式配置繁琐并且需要手动重启节点，而使用K8S进行redis安装便捷：使用镜像或者yaml配置文件即可一件安装自动调度：容器挂掉后会自动调度重启和资源分配缩扩容方便：在扩容、缩容方面的优点无需多说，一键伸缩稳定高效k8s在整个集群上进行调度，只要整个集群不挂掉总会调度到合适节点重启容器服务。
Headless Chrome入门，原来还有这样的工具。
freewebsys的专栏
11-29 5159
前言 本文的原文连接是: https://blog.csdn.net/freewebsys/article/details/81665552 未经博主允许不得转载。 博主地址是：http://blog.csdn.net/freewebsys 1，关于Headless Chrome Puppeteer 是一个控制 headless Chrome 的 Node.js API 。它是一个 Node....
[Docker]Docker部署Scrapy-redis分布式爬虫框架实践（整合Selenium+Headless Chrome网页渲染）
蛮三刀酱
01-08 2450
前言 我的京东价格监控网站需要不间断爬取京东商品页面，爬虫模块我采用了Scrapy+selenium+Headless Chrome的方式进行商品信息的采集。 由于最近爬虫用的服务器到期，需要换到新服务器重新部署，所以干脆把整个模块封装入Docker，以便后续能够方便快速的进行爬虫的部署。同时，由于我的Scrapy整合了redis，能够支持分布式爬取，Docker化后也更方便进行分布式的拓展。 任...
redis cluster k8s解决方案
雪之下丶微凉的博客
12-18 1003
nfs server IP 192.168.1.1 nfs server配置 /data/nfs/redis *(rw,sync,no_root_squas) 创建角色 kind: ClusterRole apiVersion: rbac.authorization.k8s.io/v1 metadata: name: redis-provisioner-runner rules: - ap...
在K8s上部署Redis 集群
热门推荐
朱溪江的博客
06-04 4万+
一、前言 架构原理：每个Master都可以拥有多个Slave。当Master下线后，Redis集群会从多个Slave中选举出一个新的Master作为替代，而旧Master重新上线后变成新Master的Slave。 二、准备操作 本次部署主要基于该项目： https://github.com/zuxqoj/kubernetes-redis-cluster 其包含了两种部署Redis集群的方式： S...
"深入实践Redis：集群搭建与源码分析详解
在配置文件方式搭建主从集群中，我们会详细介绍如何通过配置文件来实现Redis集群的搭建。这个过程中需要注意一些关键配置参数，比如绑定地址、监听端口、认证信息等。详细描述了主节点的配置和从节点的配置，并介绍...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值