Redis集群

最新推荐文章于 2022-01-21 15:35:41 发布
最新推荐文章于 2022-01-21 15:35:41 发布
阅读量136 收藏
点赞数
分类专栏： 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/tongzhuo1220/article/details/90437205
版权

一、[192.168.4.51-56]部署redis服务

 

yum -y install  expect gcc        
tar -xf /root/soft/redis/redis-4.0.8.tar.gz
cd /root/soft/redis/redis-4.0.8/
make  && make install

./utils/install_server.sh      #初始化

一路回车

 

二、51-56集群配置（下面以51为例）

 

/etc/init.d/redis_6379 stop
sed -i "70c bind 192.168.4.51" /etc/redis/6379.conf          
sed -i "93c port 6351" /etc/redis/6379.conf
sed -i "815c cluster-enabled yes" /etc/redis/6379.conf               #启用集群
sed -i "823c cluster-config-file nodes-6351.conf" /etc/redis/6379.conf
sed -i "829c cluster-node-timeout 5000" /etc/redis/6379.conf
sed -i "43s/\$REDISPORT/6351 -h 192.168.4.51/" /etc/init.d/redis_6379       #修改脚本能正常使用停止
/etc/init.d/redis_6379 start
ss -nutlp | grep redis
tcp    LISTEN     0      128    192.168.4.56:6356                  *:*                   users:(("redis-server",pid=2341,fd=6))
tcp    LISTEN     0      128    192.168.4.56:16356(集群通信端口默认+10000)                 *:*                   users:(("redis-server",pid=2341,fd=8))
[root@host56 ~]# redis-cli -h 192.168.4.51 -p 6351

192.168.4.51:6351> CLUSTER info

cluster_state:fail        
192.168.4.51:6351> CLUSTER nodes
 

 


 

 

三、创建redis集群

3.1 部署管理主机（管理集群）[192.168.4.51]
       部署ruby脚本运行环境

  • 1.装包    

[真机]# scp -r redis-cluster/ 192.168.4.51:/root

[root@host51 ~]# cd /root/redis-cluster

redis-3.2.1.gem  ruby-devel-2.0.0.648-30.el7.x86_64.rpm
[root@host51 redis-cluster]# gem install redis-3.2.1.gem   #gem安装工具，gem第三方插件 

[root@host51 redis-cluster]# yum -y install ruby   rubygems    ruby-devel-2.0.0.648-30.el7.x86_64.rpm

  • 2.创建管理集群命令（使用ruby语言编写）

[root@host51 ~]# cd  /root/redis-4.0.8/src

[root@host51 src]# echo $PATH

[root@host51 src]# mkdir /root/bin

[root@host51 src]# cp -r redis-trib.rb  /root/bin/redis-trib          #设搜索路径

  • 3.查看命令选项

]# redis-trib help

  •    4.建集群

（默认）必须选举三台作主库

[root@host51 src]# redis-trib create --replicas 1(这里指自动每个主库配几个从库)  \

> 192.168.4.51:6351 192.168.4.52:6352 192.168.4.53:6353 \            #做集群的host:port...

> 192.168.4.54:6354 192.168.4.55:6355 192.168.4.56:6356

Using 3 masters:
192.168.4.51:6351
192.168.4.52:6352
192.168.4.53:6353
Adding replica 192.168.4.55:6355 to 192.168.4.51:6351
Adding replica 192.168.4.56:6356 to 192.168.4.52:6352
Adding replica 192.168.4.54:6354 to 192.168.4.53:6353

......

Can I set the above configuration? (type 'yes' to accept): yes         #是否接收上述配置

......
[OK] All 16384 slots covered.
 

  • 查看集群信息（任意一台主机访问本机的redis服务查看即可）

192.168.4.51:6351> CLUSTER info        查看集群信息

cluster_state:ok      
192.168.4.51:6351> CLUSTER nodes     查看集群节点信息

 

排错：

1.服务没启，/etc/init.d/redis_6379 start       启的时候报pid文件的话就删掉

rm  -rf  /var/run/redis_6379.pid 

/etc/init.d/redis_6379 start

服务还没启就把配置文件删了   rm -rf /etc/redis/6379.conf    再从别的集群拷过来再修改

2.没有清空数据库目录

[ERR] Node 192.168.4.56:6356 is not empty. Either the node already knows other nodes (check with CLUSTER NODES) or contains some key in database 0.

/etc/init.d/redis_6379 stop

 rm -rf /var/lib/redis/6379/*
/etc/init.d/redis_6379 start

 ss -nutlp | grep redis
tcp    LISTEN     0      128    192.168.4.56:6356                  *:*                   users:(("redis-server",pid=2341,fd=6))
tcp    LISTEN     0      128    192.168.4.56:16356                 *:*                   users:(("redis-server",pid=2341,fd=8))
 

3.终极解决办法：还原（前提配置环境没问题）

/etc/init.d/redis_6379 stop
rm -rf /var/lib/redis/6379/*

/etc/init.d/redis_6379 start

 ss -nutlp | grep redis

 

 

 

 

  • 查看集群信息

[root@host51 src]# redis-trib  info 192.168.4.56:6356     #查看统计信息
 

[root@host51 src]# redis-trib check 192.168.4.52:6352      #查看详细信息
 

  • 在客户端访问集群[192.168.4.50]

[192.168.4.50]#   redis-cli -c -h 192.168.4.55 -p 6355

192.168.4.55:6355> set x 101
-> Redirected to slot [16287] located at 192.168.4.53:6353
OK
192.168.4.53:6353> set y 102
OK
192.168.4.53:6353> set z 102
-> Redirected to slot [8157] located at 192.168.4.52:6352
OK
192.168.4.52:6352> exit
[root@host50 ~]# redis-cli -c(连接集群) -h 192.168.4.52 -p 6352
192.168.4.52:6352> ping          #测试是否可以使用
PONG   
192.168.4.52:6352> keys *       #查看所有变量
1) "z"
192.168.4.52:6352> get x          #取x的变量
-> Redirected to slot [16287] located at 192.168.4.53:6353
"101"
192.168.4.53:6353> get y
"102"
192.168.4.53:6353> get z
-> Redirected to slot [8157] located at 192.168.4.52:6352
"102"
 

 

 

  • 测试集群功能

集群中主服务宕机后，对应的从服务器会自动升为主库

随便停一个服务，观察集群状态，之后再启服务

redis-cli -h 192.168.4.51 -p 6351 

宕机的主服务器启后，自动配置为 当前主键服务器的从库，并自动同步宕机期间的数据

 

  • 集群存储数据工作原理

redis集群有0～16383编号（slot，hash槽）

主库才有槽，从库自动同步（没有槽）

槽编号的范围决定了每次某个数据存在哪个库

存储数据 --> 变量名用crc16算法  做hash运算   得出来一个数字，用这个数和16384取余

取数据  ---> 变量名做运算 取余

存多少变量由内存存储空间决定

 

1）扩本机物理内存

2）添加新服务器

 

四、管理redis集群

redis-trib 脚本的选项

add-node     #添加master主机

check            #检测集群

reshard         #重新分片

add-node --slave     #添加slave主机

del-node                    #删除主机

 

4.1向集群添加新redis服务器

添加master 角色 redis 服务器[192.168.4.57]

1)装包，

2)初始化

3)启用集群配置

4)重启服务

清空数据库目录

/etc/init.d/redis_6379 stop

rm -rf /var/lib/redis/6379/*

/etc/init.d/redis_6379 start

  • 1.添加master主机

[root@host51 src]# redis-trib add-node 192.168.4.57:6357(新主机ip:端口)  192.168.4.51:6351（随便写集群的一个）
 

 重新分槽（slot）/重新分片

[root@host51 src]# redis-trib check 192.168.4.57:6357           #查看主机ID
M: 3f39a7bed09c112eab183fa83e3b80bc3014c8a6 192.168.4.57:6357
   slots:0-1364,5461-6826,10923-12287 (4096 slots) master
.......

[root@host51 src]# redis-trib reshard 192.168.4.51:6351
How many slots do you want to move (from 1 to 16384)? 4096                          #指定移出hash槽个数
Wha t is the receiving node ID? 3f39a7bed09c112eab183fa83e3b80bc3014c8a6     #指定接收hash槽主机ID
Please enter all the source node IDs.
  Type 'all' to use all the nodes as source nodes for the hash slots.
  Type 'done' once you entered all the source nodes IDs.
Source node #1:all          #指定移出hash槽主机ID
yes

2.添加slave角色redis服务器[192.168.4.58]

 

2.1 [192.168.4.58]装包、初始化、运行redis服务 且启用集群配置

/etc/init.d/redis_6379 stop

rm -rf /var/lib/redis/6379/*

/etc/init.d/redis_6379 start

2.2 在管理主机上添加slave角色服务器 (slave不需hash槽)

[root@host51 src]# redis-trib add-node --slave 192.168.4.58:6358 192.168.4.52:6352(集群里随便一个)   不指定主节点会随机添加到最少从库的主库上
[root@host51 src]# redis-trib check 192.168.4.58:58        #查看状态

 

 

4.2把redis服务器移除集群

  • 1.移出slave角色redis服务器[192.168.4.58]

[root@host51 src]# redis-trib check 192.168.4.58:6358 （查看58的id）

[root@host51 src]# redis-trib del-node 192.168.4.51:6351(集群中任意一台)  f8a8fe2d77810e4b8dc85955ad1e1665d7f8bc22 (58的ID)
[root@host51 src]# redis-trib check 192.168.4.51:6351         #查看是否删除
 

  • 2.移出master角色redis服务器[192.168.4.57]

在管理主机51做如下操作

2.1重新分片释放占用的hash槽

[root@host51 src]# redis-trib check 192.168.4.57:6357
[root@host51 src]# redis-trib  reshard 192.168.4.51:6351

指定移出hash槽个数      4096

指定接收 hash槽主机ID   *******

指定移出hash槽主机ID     ******

done

yes

2.2移除master主机
[root@host51 src]# redis-trib del-node 192.168.4.51:6351 3f39a7bed09c112eab183fa83e3b80bc3014c8a6(57的ID)
 

 

 

 

 

4.3把移除的redis服务器再添加到集群里

保证redis服务是正常启的[192.168.4.58]

重置集群信息

1)rm -rf /var/lib/redis/6379/*

2)redis-cli -h 192.168.4.58 -p 6358

192.168.4.58:6358> CLUSTER reset     #重置集群信息

192.168.4.58:6358> FLUSHALL             #删除所有数据
192.168.4.58:6358> save                          #马上存盘
 

管理主机上

添加主机

[root@host51 src]# redis-trib add-node 192.168.4.58:6358 192.168.4.51:6351
[root@host51 src]# redis-trib check 192.168.4.58:6358
[root@host51 src]# redis-trib info 192.168.4.58:6358
 

 

 

 

 

4.4把集群主机 恢复为独立的redis数据库服务器 [非必须操作，下个实验不需要集群]

]# /etc/init.d/redis_6379 stop
        ]# rm  -rf /var/lib/redis/6379/*
        ]# vim /etc/redis/6379.conf
           #cluster-enabled  yes                    
           #cluster-config-file  nodes-xxxx.conf  
           #cluster-node-timeout  5000  
        :wq
            ]# /etc/init.d/redis_6379 start
 

 

tongzhuo1220
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
redis-7
actor8的博客
06-08 297
redis学习第七章 集群 复制 通过持久化功能，redis保证了即使在服务器重启的情况下也不会损失（或少量损失）数据。 但是由于数据是存储在一台服务器上的，如果这台服务器出现硬盘故障等问题，也会导致数据丢失。为了避免单点故障，通常的做法是将数据库复制多个副本以部署在不同的服务器上，这样即使有一台服务器出现故障，其他服务器已然可以继续提供服务。为此，redis提供了复制（replication...
redis集群常见报错与解决
cuiwangfeng的博客
12-09 1779
报错1内容 Can I set the above configuration? (type 'yes' to accept): yes >>> Nodes configuration updated >>> Assign a different config epoch to each node >>> Sending CLUSTER MEET messages to join the cluster Waiting for the cluster t
LC-二叉树根节点到叶子节点的所有路径和
qq_41105501的博客
10-26 377
二叉树根节点到叶子节点的所有路径和 //二叉树根节点到叶子节点的所有路径和 /* 给定一个仅包含数字 0−9\ 0-9 0−9 的二叉树，每一条从根节点到叶子节点的路径都可以用一个数字表示。 例如根节点到叶子节点的一条路径是 1→2→31\to 2\to 3 1→2→3,那么这条路径就用 123\ 123 123 来代替。 找出根节点到叶子节点的所有路径表示的数字之和 */ /** * struct TreeNode { * int val; * struct TreeNode *left;
docker部署redis集群
ss810540895的博客
01-21 799
Redis Cluster采用无中心结构，每个节点保存数据和整个集群状态,每个节点都和其他所有节点连接。 Redis Cluster提供了一种运行Redis安装的方法，在该安装中，数据会 在多个Redis节点之间自动分片。Redis Cluster 在分区期间还提供了一定程度的可用性，这实际上是在某些节点出现故障或无法通信时继续操作的能力。但是，如果发生较大故障（例如，大多数主服务器不可用时），集群将停止运行。Redis Cluster自动分割在多个节点之间的数据集，一部分节点出现故障或无法与集群的其余部分
redis实战第十二篇 redis cluster请求重定向
超人不会飞
02-16 5011
在集群模式下，redis在接收到键任何命令时会先计算该键所在的槽，如果改键所在的槽位于当前节点，则直接执行命令，如果改键位于其它节点，则不执行该命令，返回重定向信息。 比如hello这个键槽866上，而曹866位于31节点上，假设在32上执行get hello ，则会返回重定向信息。 127.0.0.1:6380> get hello (error) MOVED 866 192.168.0....
redis集群批量插入
11-23
本文将详细讨论如何在Java环境下连接Redis集群并实现批量插入String类型的数据。 首先，我们需要理解Redis集群的基本概念。Redis集群是通过分片（Sharding）技术来分散数据到多个节点，每个节点存储一部分数据。在...
Redis集群测试
08-16
Redis集群是一种分布式数据库解决方案，它允许用户将数据分散存储在多台服务器上，以提高系统的可扩展性和可用性。在“Redis集群测试”中，我们通常会关注以下几个关键知识点： 1. **集群架构**：Redis集群采用无...
redis集群windows启动脚本
06-18
在Windows环境下，设置和管理Redis集群可能相对复杂，但通过编写启动脚本可以实现一键启动，简化操作流程。以下将详细介绍如何创建并使用“redis集群windows启动脚本”。 1. **Redis集群概念** Redis集群是Redis...
Redis集群配置文件
12-27
Redis集群配置文件，包含了三个主节点，三个从节点的配置文件，该配置是在docker中运行，有完整的docker-compose.yml文件，只要修改映射的宿主机的路径为你自己的路径。然后直接docker-compose up既可以完成环境启动...
springcloud部署redis集群
09-20
在SpringCloud框架中，部署Redis集群是实现高可用、数据持久化和分布式缓存的关键步骤。Redis是一款高性能的键值数据库，广泛应用于缓存、消息队列等多种场景。SpringCloud通过集成Spring Data Redis模块，使得在...
Redis集群使用总结（一）
热门推荐
云水之路的专栏
05-20 1万+
随着企业数据量的增多，Redis不论作为数据存储或是缓存，它的数据量也会逐渐增多，虽然Redis的速度非常可观，但随着其中的数据量的庞大，并且仅仅在一个设备或是一个Redis实例中，其存取速度也会大打折扣，所以我们需要在不同的设备或服务器上，搭建多个Redis实例仓库，将原来的Redis的所有的keys分发到各个服务器的Redis上，这就是现在所谓的Redis集群（Redis Cluster）。
Redis集群的那些谜
eddie's Blog
07-23 1411
下列问题是我在搭建Redis集群之前与实验过程发出的疑问 随着我Redis集群的成功搭建，疑问也一个一个解开 Redis集群搭建参考资料 Redis-Cluster参考资料 Redis集群的数据互通吗？ 先说结论：互通的；往Redis集群里存放一个数据时，他会以Hash Slot哈希槽的方式将数据存放在不同的结点，取出对应Key时，再连接到该结点去取出。 以集群模式随机连接至一个Redis结点，此结点中无数据： root@hadoop102:~/myredis# ./redis-cli -c -h .
Redis中的转向和故障恢复
suchenbin的博客
07-29 1842
MOVED错误 redis客户端执行命令，单机模式下，节点发现命令中的槽并非自己负责时，会返回MOVED错误，指引操作人员切换到正在负责该槽的节点。当然，在集群模式下，MOVED错误并不会打印并且会根据MOVED错误自动切换节点。 举个例子： [root@*** cluster]# ./redis-5.0.4/src/redis-cli -p 7001 127.0.0.1:7001&gt...
解决Redis集群条件下键空间通知服务器接收不到消息的问题
weixin_33845477的博客
04-28 895
解决Redis集群条件下键空间通知服务器接收不到消息的问题 键空间通知介绍 键空间通知使得客户端可以通过订阅频道或模式， 来接收那些以某种方式改动了 Redis 数据集的事件。 可以通过对redis的redis.conf文件中配置notify-keyspace-events参数可以指定服务器发送哪种类型的通知。下面对于一些参数的描述。默认情况下此功能是关闭的。 字符 通知 K 键...
细说Redirect重定向请求（情节分享）
weixin_30706691的博客
04-04 863
前些日子在开发公司项目接口的时候，由于需要与第三方平台对接，由于接口之前的层层封装，不断的需要转发，把人差点搞糊涂了。本来以为之前对Redirect的认识足够清楚，可是到实际开发之前我还是没有把这个问题想清楚，从而造成了需要花费更多的时间解决问题。总结下，并分享。 1.请求转发（forward）: 当客户端（浏览器）向远程服务器发送一个URL(http...
分包合同计量单.docx
最新发布
07-13
分包合同计量单.docx
树莓派简介PPT课件.ppt
07-13
树莓派简介PPT课件.ppt
redis集群搭建.docx
10-23
本文介绍了如何在Linux环境下搭建Redis集群。Redis是一个开源的高性能键值对存储数据库，它常用于构建分布式应用程序和缓存系统。搭建Redis集群可以提高系统的可用性和可伸缩性。 在搭建Redis集群之前，我们需要...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值