redis cluster集群架构详解（二十）- redis cluster实验：master水平扩容-支撑海量数据处理

最新推荐文章于 2024-08-01 17:23:57 发布
最新推荐文章于 2024-08-01 17:23:57 发布
阅读量1.7k 收藏 4
点赞数 2
分类专栏： redis缓存架构
本文链接：https://blog.csdn.net/makyan/article/details/104831720
版权

5.12. redis cluster实验：master水平扩容-支撑海量数据处理

redis cluster通过master水平扩容来支撑更高的读写吞吐+海量数据。

​ redis cluster模式下，不建议做物理的读写分离，我们建议通过master的水平扩容，来横向扩展读写吞吐量，并支撑更多的海量数据。

​ 6G内存的redis，在fork类操作的时候很耗时，会导致请求延时的问题，如果扩容到5台master，能支撑总缓存数据量可达到30G，如果继续扩展到100台，能支撑缓存就达到600G，继续扩展，就能达到1T+，这样就能真正支撑海量数据的处理。

5.12.1. 加入新master

加入新master

​ 以上实验，我们都是使用同一台机器，上面分别启动了端口号为7001、7002、7003、7004、7005、7006的redis，并将这6个redis 创建redis 集群。

接下来还是在这台机器上，创建端口号为7007的redis。
  • 将原先的redis配置文件7006.conf文件拷贝一份，修改文件名为7007.conf,并将之前配置的slaveof注释掉（如果之前配置了slaveof,就注释掉）
  • 将 7007.conf 放到/etc/redis/redis-cluster-7007目录下。
  • 将7007.conf文件按照以下进行配置，端口port和绑定（bind）的IP修
最低0.47元/天 解锁文章
makyan
关注
专栏目录
redis 集群部署 jedisCluster
jerryHTLi的博客
06-22 237
redis的集群部署，会把集群划分为16384个槽位（slot），比如集群里面有6个节点，其中三个是master，3个是slave，会把16384个槽位分配给3个master节点中，当用户给redis中增加值得时候，首先会把增加值得key用hase算法求到值，在用16384取余，得到的值（slot）属于哪个master的槽位区间就会把该值存贮在具体的master节点上面 特别需要数据的是，集群部署的节点中，只有master节点对外提供服务，slave只是作为备份节点。 集群环境中redis的各个节点的通
Kafka 多维度系统精讲（12）- 集群
一角残叶的博客
10-13 260
1 集群部署 kafka 天然支持集群 kafka 集群依赖 Zookeeper 进行协调 kafka 主要通过 brokerId区分不同的节点 1.1 配置 master 节点 1.2 node1 节点 其他配置同 master 节点 1.3 启动集群 每个节点启动 zk 每个节点启动 kafka 2 Kafka 副本集 ...
Redis Cluster集群配置安装
最新发布
zhangjunli的博客
08-01 1063
Redis集群是一种基于数据分片（sharding）的分布式缓存和存储系统。是一个由多个主从节点群组成的分布式服务集群，它具有复制、高可用和分片特性。Redis集群不需要sentinel哨兵也能完成节点移除和故障转移的功能。需要将每个节点设置成集群模式，这种集群模式没有中心节点，可水平扩展，据官方文档称可以线性扩展到上万个节点(官方推荐不超过1000个节点)。redis集群的性能和高可用性均优于之前版本的哨兵模式，且集群配置非常简单。
【Redis Cluster集群】redis cluster 多mster写入，读写分离，高可用
【程序员不弃】的博客
03-23 3788
4. 【Redis Cluster集群】redis cluster 多mster写入，读写分离，高可用 redis cluster,提供了多个master， 分布式存储：数据可以分布式存储到多个master上; 读写分离：每个master都带着slave，自动实现读写分离； 高可用：每个master如果故障，redis cluster可以自动将slave切换成master，以此实现redis cluster的高可用 1. 测试：多master写入 -> 海量数据的分布式存储 1.1 redis c
Redis Cluster扩、缩容
qq_15762065的博客
09-12 209
环境准备： 1.每个redis节点采用相同的硬件配置、相同的密码、相同的redis版本 2.所有redis服务器必须没有任何数据 3.准备6台机器，地址如下 172.24.205.189 redis-node1 172.31.115.113 redis-node2 172.31.115.112 redis-node3 172.24.205.187 redis-node4 172.24.205.185 redis-node5 172.24.205.184 redis-node6 Red
Redis集群之主从模式
xiaoxiaoyusheng2012的专栏
08-25 4115
Redis的定位还是分布式缓存，关于分布式的特点和挑战这里不再介绍。 一、 Redis主从模式的必要性 备份数据：当一个节点损坏时，数据因为有备份，可以方便恢复。 负载均衡：避免所有客户端都访问一个节点，有了主从模式后，查询操作就可以通过查询从节点来完成。 二、Redis主从模式的特点： 一个Master可以有多个Slaves 默认配置下，master节点可以进行读和写，slave节点只...
redis cluster集群架构详解（十五）- redis cluster常用命令
二总的猫
03-11 1594
5.8. 集群常用命令 5.8.1. 集群的重启与删除 1.关闭集群的某个节点 关闭集群的某个节点，比如关闭端口号为7001的实例： redis-cli -a cyclone -c -h 192.168.75.187 -p 7001 shutdown 执行效果如下： 关闭之后，使用如下命令可重启 redis-server /etc/redis/redis-cluster-7001/7001.c...
redis cluster集群架构详解（十九）- redis cluster实验： 多master写入、读写分离、高可用性
二总的猫
03-13 1158
5.11.redis cluster实验： 多master写入、读写分离、高可用性 ​ redis cluster，提供了多个master，数据可以分布式存储在多个master上; 每个master都带有slave，自动就做读写分离; 某个master如果出现故障，就会自动将其slave切换成master，达到高可用。 5.11.1. 多master的写入-海量数据的分布式存储原理 ​ 多ma...
redis cluster集群架构详解（九）-redis cluster 总体架构
二总的猫
03-11 1334
redis cluster 总体架构： 1、在这个图中，每一个redis服务器节点，它们任何两个节点之间都是相互连通的。客户端可以与任何一个节点相连接，然后就可以访问集群中的任何一个节点，对其进行存取和其他操作。 2、集群节点属性 集群中每个Master node负责存储数据、集群状态，包括slots与nodes对应关系。Master nodes能够自动发现其他nodes，检测failure节点...
redis cluster集群架构详解（十六）- redis cluster常用操作-节点的新增、删除、slot导入等常用操作
二总的猫
03-12 2457
接上篇文章， 5.8.7.set-timeout设置集群节点间心跳连接的超时时间 set-timeout用来设置集群节点间心跳连接的超时时间，单位是毫秒，不得小于100毫秒，因为100毫秒对于心跳时间来说太短了。该命令修改是节点配置参数cluster-node-timeout，默认是15000毫秒。通过该命令，可以给每个节点设置超时时间，设置的方式使用config set命令动态设置，然后执行co...
redis集群添加master节点
weixin_34204057的博客
12-31 491
按照《redis集群部署》的1~8步骤完成redis配置，并成功启动redis节点。1.添加新master的节点：redis-trib.rb add-node 192.168.139.30:7003 192.168.139.30:7000前面的IP加端口号是要添加的Redis节点，后面的IP和端口号是集群中的任意一个节点。2.重新分片：redis-trib.rb reshard --from 98...
Redis cluster tutorial Redis集群教程 官方教程 翻译 (一)
iteye_7262的博客
09-15 105
官方教程原地址: [url]http://redis.io/topics/cluster-tutorial[/url] 这篇文档是一个总体介绍, 不使用复杂的分布式概念. 本文介绍如何建立一个集群, 测试和使用, 详细说明请参看[url=http://redis.io/topics/cluster-spec]Redis Cluster specification[/url] ...
Redis集群master节点挂掉之后的处理方式
weixin_47556601的博客
03-23 6471
大家好，今天分享Redis集群master节点挂掉之后的处理方式 我们前面做的主从复制 是这样的一个结构 要改成这样 将6303的主节点接到6302 127.0.0.1:6303> SLAVEOF 127.0.0.1 6302 OK 127.0.0.1:6303> 在6303上看，它的主节点变成了6302 127.0.0.1:6303> INFO replication # Replication role:slave master_host:127.0.0.1 master_p
redis cluser查看每个主节点管理的slot和从节点
u010627840的专栏
03-25 4600
> cluster slots 1) 1) (integer) 10923 // 管理的起始slot 2) (integer) 16383 // 管理的截止slot 3) 1) "10.38.162.110" // 主节点ip 2) (integer) 7007 // 主节点端口 3) "caf219cd84e345c8e6b4...
Redis 集群的合纵与连横
weixin_33843947的博客
01-04 452
之前一篇写了关于 Redis 的性能，这篇就写写我认为比性能更重要的扩展性方面的主题。 如果再给我一次回到好几年前的机会，对于使用 Redis 我一开始就要好好考虑将来的扩展问题。就像我们做数据库分库分表，一旦决策了分库分表，通常一次就会分到位，比如搞上 8 或 16 个库，每个库再分 256 或 1024 个表。不管将来业务再怎么发展，基本这个量级的分片都足够应对，而且底层库可以做成逻辑的，扛...
redis查看主从状态信息master和slave
whatzhang007的博客
02-01 2383
方法一： 方法二：
查看redis集群信息
热门推荐
GavenFang
04-03 6万+
注：ip为安装redis的那台服务器(集群中的其中一台)的ip，password为redis的密码 查看redis中存的数据 1.ssh root@ip 2.Password: password 3.keys * 4.type key 5.hkeys key 6.hget key field 1.集群状态 redis-cli -h ip -p 9379 -a password cluster in...
Redis集群为什么至少需要三个master节点，并且推荐节点数为奇数？
xisheng_lx的博客
10-27 7945
问题一：Redis集群为什么至少需要三个master节点？ 因为新master的选举需要大于半数的集群master节点同意才能选举成功，如果只有两个master节点，当其中一个挂了，是达不到选举新master的条件的。     问题二：Redis集群为什么推荐节点数为奇数？ 奇数个master节点可以在满足选举该条件的基础上节省一个节点，比如三个master节点和四个master节点的集群相比，大家如果都挂了一个master节点都能选举新master节点，如果都挂了两个master节点都
搭建RedisCluster：详解步骤与配置命令
Redis Cluster通过将数据分布在多个节点（Master和Slave）之间，实现了水平扩展和故障容错。 首先，我们需要准备一台主节点（Master）和多台从节点（Slave），每台服务器的IP地址和端口设置如下： - 主节点IP: 10....
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值