案例：快速部署Redis群集

最新推荐文章于 2022-10-29 17:28:41 发布
最新推荐文章于 2022-10-29 17:28:41 发布
阅读量321 收藏
点赞数
文章标签： redis 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Mr_XHC/article/details/111316986
版权

文章目录

一、Redis集群简介

Redis Cluster是一个无中心的结构，每个节点都保存数据和整个群集的状态。每个节点都会保存其他节点的信息，知道其他节点所负责的槽，并且会与其他节点定时发送心跳信息，能够及时感知群集中异常的节点。
Redis没有统一的路口，当客户端向群集中任一节点发送与数据库键有关的命令时，接受命令的节点会计算出命令要处理的数据库键属于哪个槽，并检查这个槽是否指派给了自己。如果键所在的槽正好指派给了当前节点，那么节点直接执行这个命令；如果键所在的槽并没有指派给当前节点，那么节点会向客户端返回一个MOVED错误，指引客户端转向（redirect）正确的节点，并再次发送之前想要执行的命令。

二、Redis集群概述

2.1、Redis集群介绍

1、Redis集群是一个提供在多个Redis间节点间共享数据的程序集
2、Redis集群并不支持处理多个keys的命令，因为这需要在不同的节点间移动数据，从而达不到像Redis那样的性能，在高负载的情况下可能会导致不可预料的错误
3、Redis集群通过分区来提供一定程度的可用性，在实际环境中当某个节点宕机或者不可达的情况下可继续处理命令

2.2、Redis集群的优势

1、自动分割数据到不同的节点上
2、整个集群的部分节点失败或者不可达的情况下能够继续处理命令

2.3、Redis集群的实现方法

1、有客户端分片
2、代理分片
3、服务器端分片

2.4、Redis-Cluster数据分片

1、Redis集群没有使用一致性hash，而是引入了哈希槽概念；

2、Redis集群有16384个哈希槽；

3、每个key通过CRC16校验后对16384取余来决定放置槽；

4、集群的每个节点负责一部分哈希槽；

Redis 集群中内置了 16384 个哈希槽，当需要在 Redis 集群中放置一个 key-value时，redis 先对 key 使用 crc16 算法算出一个结果，然后把结果对 16384 求余数，这样每个 key 都会对应一个编号在 0-16383 之间的哈希槽，redis 会根据节点数量大致均等的将哈希槽映射到不同的节点。

5、数据分片

以3个节点组成的集群为例
节点A包含0到5500号哈希槽
节点B包含5501到11000号哈希槽
节点C包含11001到16384号哈希槽
支持添加或者删除节点
添加/删除节点无需停止服务（支持热状态）

例如：

如果想新添加个节点D，需要移动节点A,B,C中的部分槽到D上

如果想移除节点A，需要将A中的槽移到B和C节点上，再将没有任何槽的A节点从集群中移除。

2.5、Redis-Cluster的主从复制模型

1、集群中具有A,B,C三个节点，如果节点B失败了，整个集群就会因缺少5501-11000这个范围的槽而不可用；
2、为每个节点添加一个从节点A1,B1,C1，整个集群便有三个master节点和三个slave节点组成，在节点B失败后，集群便会选举B1为新的主节点继续服务；
3、当B和B1都失败后，集群将不可用。

三、搭建Redis集群

3.1、案例环境

6台Linux服务器安装Centos 7系统

主服务器从服务器
master1 192.168.40.11:6379slave1 192.168.40.14:6379
master2 192.168.40.12:6379slave2 192.168.40.15:6379
master3 192.168.40.13:6379slave3 192.168.40.16:6379

3.2、实验步骤

先是Redis安装，由于是6台服务器，可以在Xshell中
工具→发送键输入到所有会话，更加方便。

1、安装编译工具后编译安装redis

[root@redis-server1 ~]# tar zxf redis-5.0.4.tar.gz
[root@redis-server1 ~]# cd redis-5.0.4/
[root@redis-server1 redis-5.0.4]# make
[root@redis-server1 redis-5.0.4]# make PREFIX=/usr/local/redis install

2、进行命令路径优化，执行redis安装脚本进行配置

[root@redis-server1 ~]# ln -s /usr/local/redis/bin/* /usr/local/bin
[root@redis-server1 ~]# cd redis-5.0.4/utils/
[root@redis-server1 utils]# ./install_server.sh	#安装后redis自动开启了
Welcome to the redis service installer
This script will help you easily set up a running redis server

Please select the redis port for this instance: [6379]	#默认端口
Selecting default: 6379
Please select the redis config file name [/etc/redis/6379.conf]	#配置文件路径
Selected default - /etc/redis/6379.conf
Please select the redis log file name [/var/log/redis_6379.log]	#日志文件路径
Selected default - /var/log/redis_6379.log
Please select the data directory for this instance [/var/lib/redis/6379]	#数据文件路径
Selected default - /var/lib/redis/6379
Please select the redis executable path [/usr/local/bin/redis-server]	#执行文件路径
Selected config:
Port           : 6379
Config file    : /etc/redis/6379.conf
Log file       : /var/log/redis_6379.log
Data dir       : /var/lib/redis/6379
Executable     : /usr/local/bin/redis-server
Cli Executable : /usr/local/bin/redis-cli	#客户端命令工具
Is this ok? Then press ENTER to go on or Ctrl-C to abort.
Copied /tmp/6379.conf => /etc/init.d/redis_6379
Installing service...
Successfully added to chkconfig!
Successfully added to runlevels 345!
Starting Redis server...
Installation successful!	#出现successful!即表示安装成功
在执行脚本的时候，配置项全部默认，直接回车即可

3、修改配置文件

[root@redis-server1 ~]# vi /etc/redis/6379.conf
 70 bind 192.168.40.11  #删除之前的127.0.0.1，改为各主机的IP地址
 89 protected-mode no   #关闭保护模式
 137 daemonize yes      #以独立进程启动
 833 cluster-enabled yes  #开启群集功能
 841 cluster-config-file nodes-6379.conf  #群集名称文件设置
 847 cluster-node-timeout 15000  #群集超时时间
 700 appendonly yes  #开启aof持久化

4、正常启动后，/var/lib/redis/6379/目录下会多出三个文件，第一个是持久化文件appendonly.aof，第二个是RDB持久文件dump.rdb，另外一个是节点首次启动生成的nodes-6379.conf

[root@redis-server1 ~]# /etc/init.d/redis_6379 start	#重新启动启动服务
[root@redis-server1 ~]# cd /var/lib/redis/6379
[root@redis-server1 6379]# ls
appendonly.aof  dump.rdb  nodes-6379.conf

仅要一台redis中操作，准备生成集群：
5、导入redis-3.2.0.gem 并执行

[root@redis-server1 ~]# yum -y install ruby rubygems
[root@redis-server1 ~]# gem install redis-3.2.0.gem 
Successfully installed redis-3.2.0
Parsing documentation for redis-3.2.0
Installing ri documentation for redis-3.2.0
1 gem installed

6、使用脚本创建集群
六个实例分为三组，每组一主一从，–replicas 1 表示每组一个从，下面交互的时候需要输入yes才可以创建。

[root@redis-server1 ~]# redis-cli --cluster create --cluster-replicas 1 192.168.40.11:6379 192.168.40.12:6379 192.168.40.13:6379 192.168.40.14:6379 192.168.40.15:6379 192.168.40.16:6379
>>> Performing hash slots allocation on 6 nodes...
Master[0] -> Slots 0 - 5460
Master[1] -> Slots 5461 - 10922
Master[2] -> Slots 10923 - 16383
Adding replica 192.168.40.15:6379 to 192.168.40.11:6379
Adding replica 192.168.40.16:6379 to 192.168.40.12:6379
Adding replica 192.168.40.14:6379 to 192.168.40.13:6379
M: 8ecd97bf08061ad5c90b42c9d1e2440de5326664 192.168.40.11:6379
   slots:[0-5460] (5461 slots) master
M: d7c1808bf2fdc211ef963e0bba11f5cb880480ba 192.168.40.12:6379
   slots:[5461-10922] (5462 slots) master
M: 85e5287b513092dc492c6036883693563c85865b 192.168.40.13:6379
   slots:[10923-16383] (5461 slots) master
S: d24a9528a8af311aff410c9cd74bf2a4158993ad 192.168.40.14:6379
   replicates 85e5287b513092dc492c6036883693563c85865b
S: 62a81e11cadb0527189584807028b14ebc5d369e 192.168.40.15:6379
   replicates 8ecd97bf08061ad5c90b42c9d1e2440de5326664
S: 972a93f6d8de524896441f398d94006e24a2a39a 192.168.40.16:6379
   replicates d7c1808bf2fdc211ef963e0bba11f5cb880480ba
Can I set the above configuration? (type 'yes' to accept): yes
>>> Nodes configuration updated
>>> Assign a different config epoch to each node
>>> Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join
....
>>> Performing Cluster Check (using node 192.168.40.11:6379)
M: 8ecd97bf08061ad5c90b42c9d1e2440de5326664 192.168.40.11:6379
   slots:[0-5460] (5461 slots) master
   1 additional replica(s)
M: d7c1808bf2fdc211ef963e0bba11f5cb880480ba 192.168.40.12:6379
   slots:[5461-10922] (5462 slots) master
   1 additional replica(s)
S: 972a93f6d8de524896441f398d94006e24a2a39a 192.168.40.16:6379
   slots: (0 slots) slave
   replicates d7c1808bf2fdc211ef963e0bba11f5cb880480ba
S: d24a9528a8af311aff410c9cd74bf2a4158993ad 192.168.40.14:6379
   slots: (0 slots) slave
   replicates 85e5287b513092dc492c6036883693563c85865b
S: 62a81e11cadb0527189584807028b14ebc5d369e 192.168.40.15:6379
   slots: (0 slots) slave
   replicates 8ecd97bf08061ad5c90b42c9d1e2440de5326664
M: 85e5287b513092dc492c6036883693563c85865b 192.168.40.13:6379
   slots:[10923-16383] (5461 slots) master
   1 additional replica(s)
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.

7、主从数据库验证

[root@redis-server1 ~]# redis-cli -h 192.168.40.12 -p 6379 -c	#-c	连接集群结点时使用, 此选项可防止moved和ask异常。
192.168.40.12:6379> set centos 7.6
-> Redirected to slot [467] located at 192.168.40.11:6379
OK
提示存储该键值的哈希槽为467，位置定位到在服务器192.168.40.11上
192.168.40.11:6379> exit

[root@redis-server1 ~]# redis-cli -h 192.168.40.13 -p 6379 -c
192.168.40.13:6379> get centos
-> Redirected to slot [467] located at 192.168.40.11:6379
"7.6"

由此可以看出11是主数据库

cluster info	#查看集群状态

在这里插入图片描述

cluster nodes	#查看节点信息

在这里插入图片描述

3.3、案例总结

1、导致群集down掉的两种情况

（1）三个redis-server服务器全部宕机。

（2）master1宕机，对应的slave1也发生了宕机。

2、在上述实验中，如果master1宕机，slave1会继承master1的哈希槽，成为master1，这时master1重新启动之后会变成slave节点，且就算刚才顶替上来的slave1节点关机掉，master1依然是slave节点。

Mr_XHC
关注
第02课：主流分布式缓存方案的解读及比较
Jin_Kwok的博客
10-28 1441
分布式缓存一般被定义为一个数据集合，它将数据分布（或分区）于任意数目的集群节点上。集群中的一个具体节点负责缓存中的一部分数据，整体对外提供统一的访问接口。分布式缓存一般基于冗余备份机制实现数据高可用，又被称为内存数据网格（IMDG，In-Memory Data Grid）。在云平台飞速发展的今天，作为提升应用性能的重要手段，分布式缓存技术在工业界得到了越来越广泛的关注和研发投入 。本文将介绍三种分...
Mysql 查询根节点下所有叶子节点
06-19
1、SELECT * FROM ( SELECT d.id, ( SELECT count( 1 ) FROM t_tree dd WHERE dd.parent_uuid = d.id ) AS count FROM t_tree d ) a WHERE a.count =0； 2、SELECT t3.id FROM t_tree t3 WHERE t3.id NOT IN ( SELECT t1.id FROM t_tree t1, t_tree t2 WHERE t1.id = t2.parent_uuid )
（P39）面向对象版表达式计算器：表达式树，类设计
喜欢打篮球的普通人
10-12 569
文章目录1.表达式计算器设计3.类设计 1.表达式计算器设计 表达式树 将5+3*6解析成表达式树，整个表达式的值就等于根节点+的值，而根节点的值=其左节点5+右节点*的值（根节点的计算要依赖于其左节点和右节点），而*节点的值=左节点3+右节点6的值。 所以，要计算根节点的值，需要递归的遍历底下的子节点来进行计算。 类设计，继承体系 NumberNode数字节点的Calc方法等于数字本身， BinaryNode二元运算节点：+或者*运算的节点，有两个操作数，左操作数，右操作数 加法运算节点AddNode
树Tree形结构,获取所有叶子节点路径
一念永恒
07-05 4123
public static void fun(TreeNode node, List<String> path, List<List<String>> allPah) { if (node.children.size() == 0) { allPah.add(path); return; } for (TreeNode cNode : node.children) { List<String> cPath = new Arra..
confluence高可用/集群研究
I'm Hexesdesu
01-15 1365
https://mraddon.blog/2015/05/27/how-to-install-confluence-in-cluster/ （第三方的集群教程） https://gitee.com/pengzhile/atlassian-agent （大佬的crack-agent） https://zhile.io/2018/12/20/atlassian-license-crack.html h...
MySQL树结构查询所有叶子节点
geniusbluesky的博客
06-03 1390
这里写自定义目录标题SQL语句 SQL语句 select * from (SELECT d.*, (select count(1) from sys_depart dd where dd.parent_id = d.id) as count FROM sys_depart d) a where a.count=0
案例：NoSQL之Redis集群
weixin_39608791的博客
09-10 672
文章目录NoSQL之Redis集群一、概览1、案例概述2、Redis集群介绍3、Redis集群的优势4、Redis集群的实现方法5、Redis-cluster数据分片6、Redis-cluster的主从复制模型二、实验1、实验环境2、实验目的3、实验步骤3.1、主从服务器部署Redis3.2、主从服务器配置文件修改3.3、主服务器安装rvm，RUBY控制集群软件3.4、主服务器添加两块网卡3.5、从服务器添加两块网卡3.6、主服务器上创建群集3.7、集群验证 NoSQL之Redis集群 一、概览 1、案例概
NoSQL之redis集群
ver_mouth__的博客
07-01 973
redis群集有三种模式，分别是主从同步/复制、哨兵模式、Cluster，下面会讲解一下三种模式的工作方式，以及如何搭建cluster群集主从复制是高可用redis的基础，哨兵和集群都是在主从复制基础上实现高可用的主从复制主要实现了数据的多机备份，以及对于读操作的负载均衡和简单的故障恢复缺陷：故障恢复无法自动化，写操作无法负载均衡，存储能力受到单机的限制在主从复制的基础上，哨兵实现了自动化的故障恢复缺陷：写操作无法负载均衡，存储能力受到单机的限制，哨兵无法对从节点进行自动故障转移在读写分离场景下，从节点故障
九章——Redis群集（应用——linux防护与群集）
MKC__jiaoq的博客
09-08 963
三期总目录链接
SpringBoot使用Redis 数据访问(单点、集群、哨兵、连接池、Pipline、分布式框架Redisson、解决方案)
纸上得来终觉浅，绝知此事要躬行
04-29 2147
Redis操作是单线程的，使用连接池可以减少连接的创建，redis连接池有两种方式:Jedis(JedisPool) 和 Lettuce(LettucePool)。Lettuce 和 Jedis 的定位都是Redis的client，所以他们当然可以直接连接redis server。在Lettuce和Jedis之外还有Redission ，Redisson：实现了分布式和可扩展的Java数据结构。...
leach协议源代码matlab
03-27
leach基本代码，适用使用matlab仿真。
mysql 记录为叶子结点,MySQL---索引
weixin_39965283的博客
03-23 679
1.索引B+Tree原理1.数据结构??B Tree指的是Balance Tree，也就是平衡多叉查找树。平衡树是一颗查找树，并且所有的叶子节点位于同一层。一个m阶的B树具有如下几个特征：??1.根结点至少有两个子女。??2.每个中间节点都包含k-1个元素和k个孩子，其中 m/2 <= k <= m??3.每一个叶子节点都包含k-1个元素，其中 m/2 <= k <= m?...
树形结构的JSONArray 转 list<ModelMenu> 并获取所有叶子节点对象集合
qq_18453581的博客
04-12 1577
树形结构实体类ModelMenu /*** * json数组 递归 返回List<ModelMenu> * @param jsonArray * @return */ public static ArrayList<ModelMenu> convertModelMenu(JSONArray jsonArray)...
JAVA-递归构建树形结构 嵌套子节点返参给前端 && 获取某节点下所有叶子节点 && 获取某节点下叶节点(没有子节点的节点)
最新发布
君琴 的博客
10-29 2283
JAVA项目中递归根据parentId构建树形结构，嵌套其children子节点返参给前端。获取某个根节点下所有叶子节点；获取某个根节点下叶节点(没有子节点的节点)；只获取叶子节点id。
mysql查询指定节点下的所有叶子节点
m0_58594265的博客
09-08 642
mysql 递归查询叶子节点
MySQL查询所有叶子节点
云边有个L君
07-28 1062
MySQL查询所有叶子节点
mysql 叶子节点_mysql求某一个根节点所有叶子节点
weixin_28900989的博客
02-17 411
需求：通过一个user_id找到它所在的部门，再找到它所在部门的最底层部门，再到这些最底层部门的人user_id表信息：部门信息表CREATE TABLE `SYS_DEPART` (`DEPART_ID` bigint(20) NOT NULL AUTO_INCREMENT COMMENT '主键',`DEPART_NAME` varchar(128) COLLATE utf8_bin DEFA...
mysql查询节点下的所有叶子节点
03-14 2219
使用存储过程查询节点下的所有叶子节点：树的表结构：节点ID：t_sort_id,  父节点：t_sort_farther procedure1： begin  declare deep int;  set deep=1;  drop TABLE IF EXISTS tmpLst;  CREATE TABLE tmpLst(id int primary key,pid int,depth
查询所有的叶子结点（MySQL）
欢迎来到我的博客，一起学习Java！
01-20 1681
SELECT * from x_areas where aid not in (SELECT DISTINCT x.aid FROM x_areas x, x_areas t where x.aid = t.pid)
SpringBoot集成Jedis：快速部署Redis并实现JavaBean操作
在SpringBoot中集成Redis以实现秒杀系统，通常会利用Jedis作为Redis的Java客户端。首先，确保安装Redis并验证其正确运行。接下来，通过Spring Initializr创建一个新的Spring Boot项目，选择Maven作为依赖管理工具。...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值