6.redis-集群

最新推荐文章于 2024-11-02 12:56:00 发布
最新推荐文章于 2024-11-02 12:56:00 发布
阅读量369 收藏
点赞数
分类专栏： reids 文章标签： redis 数据库 java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_43699122/article/details/130197985
版权
文章介绍了如何通过Redis集群来应对超过10万/秒的操作率（OPS）。集群能分散服务器访问和存储压力，提供负载均衡和可扩展性。详细步骤包括配置主从结构、启动服务、启用集群，并展示了添加、删除节点以及分槽的操作。还提到了集群内置的哨兵模式和注意事项，如只能删除无数据的节点。
摘要由CSDN通过智能技术生成

01-集群cluster

  • 存在的问题

    • redis提供的服务OPS(operation per second)可以达到10万/秒，当前业务OPS如果超过10万/秒，怎么办？

  • redis集群

    • [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-gITgqXr9-1681709270830)(null)]

    • 使用网络将若干redis主从机器机联通起来，并提供统一的管理方式，使其对外呈现单机的服务效果

  • 好处

    • 分散单台服务器的访问压力，实现负载均衡
    • 分散单台服务器的存储压力，实现可扩展性
    • 降低单台服务器宕机带来的业务灾难

02-cluster集群搭建

  • 需求

    • 搭建三个 1主1从 结构，并启动cluster集群

  • 配置说明

    # 是否启用cluster，加入cluster节点
cluster-enabled yes|no

# cluster配置文件名，该文件属于自动生成，仅用于快速查找文件并查询文件内容
cluster-config-file filename

# 节点服务响应超时时间，用于判定该节点是否下线或切换为从节点
cluster-node-timeout milliseconds

  • 语法

    #主机ip1:主机port1
#从机ip1:从机port1
#n: 1台主机对应n台从机

redis-cli --cluster create 主机ip1:主机port1 [主机ip2:主机port2 ...] 从机ip1:从机port1 [从机ip2:从机port2 ...] --cluster-replicas n

  • 开发步骤

    • ①配置主从结构
    • ②启动主从服务
    • ③启用集群服务
    • ④查看集群信息

  • ①配置主从结构

    #主机配置
port 6379
daemonize no
# logfile "log-6379.log"
maxclients 100000
timeout 0
loglevel debug

# RDB设置
# 1.设置rdb文件名
dbfilename "dump-6379.rdb"

# 2.设置rdb文件存储路径
dir "/usr/local/redis-6379/data"

# 3.设置存储rdb时是否压缩数据
rdbcompression no

# 4.设置读写文件过程是否进行RDB格式校验
rdbchecksum no

# 5.后台存储过程中如果出现错误现象，是否停止保存操作
stop-writes-on-bgsave-error yes

# 6.每隔10秒检测一次,有2个数据变化就执行bgsave指令
save 10 2

# AOF设置
# 1.开启aof持久化功能
appendonly yes
# 2.设置aof文件名
appendfilename "appendonly-6379.aof"
# 4.设置aof策略
appendfsync everysec

# 5.当前aof文件大小达到64mb，自动触发AOF重写
auto-aof-rewrite-min-size 64mb
# 5.当前aof文件大小比之前aof文件大小增加了100%，自动触发AOF重写
auto-aof-rewrite-percentage 100

protected-mode no

# 是否启用cluster，加入cluster节点
cluster-enabled yes

# cluster配置文件名，该文件属于自动生成，仅用于快速查找文件并查询文件内容
cluster-config-file "cluster-6379.conf"

# 节点服务响应超时时间，用于判定该节点是否下线或切换为从节点
cluster-node-timeout 5000

    #从机配置
# slave-26379

port 26379
daemonize no
dir "/usr/local/redis-26379/data"

# 设置RDB文件
dbfilename "dump-26379.rdb"

# 开启aof
appendonly yes
appendfilename "appendonly-26379.aof"
appendfsync everysec

# 设置无密码访问
protected-mode no

# 开启集群
cluster-enabled yes
# cluster配置文件名
cluster-config-file "cluster-26379.conf"
# 节点服务响应超时时间为5秒
cluster-node-timeout 5000

  • ②启动主从服务

    # 集群至少3个主节点,至少6个节点

redis-server /usr/local/redis-6379/redis-6379.conf
redis-server /usr/local/redis-6380/redis-6380.conf
redis-server /usr/local/redis-6381/redis-6381.conf

redis-server /usr/local/redis-26379/redis-26379.conf
redis-server /usr/local/redis-26380/redis-26380.conf
redis-server /usr/local/redis-26381/redis-26381.conf

  • ③启用集群服务

    redis-cli --cluster create 192.168.199.110:6379 192.168.199.110:6380 192.168.199.110:6381 192.168.199.110:26379 192.168.199.110:26380  192.168.199.110:26381 --cluster-replicas 1
    • ga3vqwetg3qw4a5rfvwq

  • ④查看集群信息

    cluster nodes
    • 3tgy4q2r5w627y35q6

  • 注意事项

    • 在cluster集群中, 确认主从关系不需要配置slaveof ip port
    • redis集群有16384个槽, 默认是等分.

03-cluster集群演示

  • 需求

    • ①使用集群模式操作redis

      redis-cli -c -p 端口

    • ②关闭redis-6379, 查看主从切换情况

  • ①使用集群操作redis

    • tgy3qayw5g34aghqa

  • ②关闭redis-6379, 查看主从切换情况

    • 注意: cluster集群内置哨兵模式.

04-cluster集群节点操作之添加master

  • 语法

    #new-master-host:new-master-port: 新主机的ip和port
#cluster-host:cluster-port: 已经在集群中的设备的ip和port
redis-cli --cluster add-node new-master-host:new-master-port cluster-host:cluster-port

  • 需求

    • 新建6382的节点, 并将其添加到redis集群中

  • 开发步骤

    • ①新建6382节点并启动
    • ②将其添加到redis集群中

  • ①新建6382节点并启动

    • tg3qwayg7w4352ay52gwq37

  • ②将其添加到redis集群中

    redis-cli --cluster add-node 192.168.199.110:6382 192.168.199.110:6379
    • tgw3q4yg435wg5w24372yq

05-cluster集群节点操作之添加slave

  • 语法

    #new-slave-host:new-slave-port: 新从机的ip和port
#master-host:master-port: 主机的ip和port
#masterid: 主机的id

redis-cli --cluster add-node new-slave-host:new-slave-port master-host:master-port --cluster-slave --cluster master-id masterid

  • 需求

    • cluster集群添加slave-26382

  • 开发步骤

    • ①新建26382节点并启动
    • ②将其添加到redis集群中

  • ①新建26382节点并启动

    • t3qgawfyg3w45q2ar

  • ②将其添加到redis集群中

    redis-cli --cluster add-node 192.168.199.110:26382 192.168.199.110:6382 --cluster-slave --cluster-master-id 7815c2d8a6255391d3d38a7cdfd689ec5f7ad927

  • 5r215tqeh5u7hbe

  • tg3qawygh2w435

06-cluster集群节点操作之移除节点

  • 语法

    #del-node del-cluster-host:del-cluster-port: 需要删除的节点的ip和port
#del-cluster-id: 需要删除的节点的id
redis-cli --cluster del-node del-cluster-host:del-cluster-port del-cluster-id

  • 需求

    • cluster集群移除master-6382、slave-26382

  • 代码实现

    redis-cli --cluster del-node 192.168.216.110:6382 c876a9869fdcb8a91decb109d73cf56df6277369

    redis-cli --cluster del-node 192.168.216.110:26382 0a84ac5ddb836fe56444f9a85726314d435d226a

  • 注意事项

    • 只能删除空节点(①没有slots, ②没有从机)

07-cluster集群分槽

  • 概述

    • redis集群中有16384个槽, 用于存储数据.

  • 语法

    #--cluster reshard target-master-host:target-master-port: 目标主机的ip和port
#--cluster-from src-master-id1 ... src-master-idn: 源头主机的id
#--cluster-to target-master-id: 目标主机的id
#--cluster-slots slots: 槽的数量
redis-cli 
--cluster reshard target-master-host:target-master-port 
--cluster-from src-master-id1 ... src-master-idn 
--cluster-to target-master-id 
--cluster-slots slots

  • 需求

    • 6379, 6380,6381, 6382四个主机均分16384个slots, 每一个主机分得4096

  • 代码实现

    redis-cli --cluster reshard 192.168.199.110:6382 --cluster-from 4cdc5c3348744f68887c4e12e62965727b9ae373 b4cfa66305c8e8edce500425b667873344aa89a8 b3ca1b27d891d42bf7abda2e66a5f2f441a2f444 --cluster-to 7815c2d8a6255391d3d38a7cdfd689ec5f7ad927 --cluster-slots 4096

  • 补充

    • 如果要删除主机, 需要先将槽分配给其他主机, 再删除对应的从机.
小钱要努力
关注
专栏目录
Redis ----集群配置
weixin_39522074的博客
06-27 1924
如果存储很大大对象，则可以使用更大的page，如果不 确定，就使用默认值。指定Redis最大内存限制，Redis在启动时会把数据加载到内存中，达到最大内存后，Redis会先尝试清除已到期或即将到期的Key，当此方法处理 后，仍然到达最大内存设置，将无法再进行写入操作，但仍然可以进行读取操作。指定是否启用虚拟内存机制，默认值为no，简单的介绍一下，VM机制将数据分页存放，由Redis将访问量较少的页即冷数据swap到磁盘上，访问多的页面由磁盘自动换出到内存中（在后面的文章我会仔细分析Redis的VM机制）
解决redis集群.redis-cli 启动 Connection refused
m0_67401545的博客
03-30 1664
./redis-cli -a redis123 --cluster create --cluster-replicas 1 30.4.211.1:7001 30.4.211.1:7002 30.4.211.1:7003 30.4.211.1:7004 30.4.211.1:7005 30.4.211.1:7006 Warning: Using a password with '-a' or '-u' option on the command line interface may not be safe.
redis-cluster集群模式
m0_61652338的博客
08-14 1713
【redis-cluster模式】（redis 5.0）
redis-trib.rb和redis-cli部署redis主从集群的异同
RSQ博客
04-29 4939
redis-trib.rb跟redis-cli部署redis主从集群的异同，redis-trib.rb迁移slot报错解决，新增Master实例报错。
Redis-Cluster集群搭建
Heart_F的博客
08-09 1872
redis集群搭建
redis-cluster集群安装配置及SpringBoot + redis-cluster配置
qq_32512453的博客
11-26 8036
SpringBoot+redis-cluster配置，及redis-cluster集群安装配置
Redis-Cluster集群
shuanglongman5531的博客
10-19 3520
Redis-Cluster集群 Redis-Cluster集群简介 一、Redis-Cluster集群介绍 1、redis cluster集群是一个由多个主从节点群组成的分布式服务器群，它具有复制、高可用和分片特性。 2、Redis cluster集群不需要sentinel哨兵也能完成节点移除和故障转移的功能。需要将每个节点设置成集群模式，这种集群模式没有中心节点。 3、高达 1000 个节点的高性能和线性可扩展性。没有代理，使用异步复制，并且不对值执行合并操作。 二、为何使用Redis-.
《Linux运维总结：使用新版redis-shake3.x进行redis集群间的数据同步【方案一】》
东城绝神
12-30 2567
《Linux运维总结：使用redis-shake进行redis集群间的数据同步》
redis-4 搭建redis集群
weixin_67865831的博客
01-26 2231
搭建redis集群，新增主从节点，删除主从节点
Redis-集群搭建(cluster集群、集群创建、节点配置、节点添加、节点删除、槽位分配)
热门推荐
JolyouLu的博客
07-19 3万+
Redis-集群搭建 在连接Redis集群搭建之前首先具备的前置知识有Redis的安装，Redis持久化，Redis主从复制，若还没了解都可以通过阅读以下文章了解以下 Liunx-安装Redis Redis-主从复制(一主二从、主从复制原理、单哨兵模式、多哨兵模式) Redis-持久化(RDB配置、RDB原理、AOF配置、AOF原理、混合持久化配置) 高可用集群 哨兵模式 其实对于一般的小型项目，利用哨兵模式+主从复制已经可以满足了，但是由于Redis是单线程应用所以在单主节点下理论上说Redis可以
Redis-x64-5.0.14.msi和Redis-x64-5.0.14.zip
12-20
6. **集群部署**：若需搭建Redis集群，Windows版Redis同样支持，但配置过程相对复杂，需要正确配置节点间的通信和槽分配。 总的来说，`Redis-x64-5.0.14.msi`适合快速部署和简单管理，而`Redis-x64-5.0.14.zip`适合...
redis集群安装 redis 6.x 安装包 redis-6.2.1_install.tar.gz
12-01
本文将详细介绍如何使用提供的 `redis-6.2.1_install.tar.gz` 压缩包来搭建 Redis 6.x 集群。 首先，你需要确保你的服务器环境支持 Redis 的运行，通常要求为 Linux 系统，例如 Ubuntu 或 CentOS。确保系统中已经...
redis5离线安装文件包,包含redis-5.0.14.tar.gz和redis-4.6.0.gem
06-10
# 下载 redis-3.2.1.gem然后本地安装 sudo gem install -l ./redis-3.2.1.gem port 6379 daemonize yes #bind自己的ip bind 192.168.129.101 protected-mode no #启用集群 cluster-enabled yes cluster-config-file ...
redis-stack-server-6.2.6-v7.rhel7.x86-64.tar.gz
07-04
6. 监控与管理：使用 RedisInsight 远程连接到 Redis 实例，查看性能指标和管理数据。 总之，`redis-stack-server-6.2.6-v7.rhel7.x86-64.tar.gz` 是一个包含全套 Redis 功能的打包软件，对于需要强大、灵活和高度...
Redis-x64-3.2.100-稳定版.rar
04-06
6. **数据结构与操作**：Redis 支持多种数据结构，如 String（字符串）、Hash（哈希表）、List（列表）、Set（集合）、Sorted Set（有序集合）。例如，`SET key value` 用于设置键值对，`GET key` 用于获取键对应的...
CentOS 7系统下Redis Cluster集群一键部署脚本发布
最新发布
运维人生
11-02 188
环境准备：自动安装Redis所需的依赖包，并下载Redis源码。Redis安装：编译并安装Redis。配置文件生成：为每个Redis节点生成独立的配置文件。Redis实例启动：根据配置文件启动Redis实例。集群创建：使用redis-cli命令创建Redis Cluster集群。本文提供了一个在CentOS 7系统下Redis Cluster集群的一键部署脚本，帮助开发者快速搭建Redis Cluster集群。未来，我们将继续完善该脚本，增加更多的功能和配置选项，以满足不同场景下的需求。
docker部署nginx+nacos+redis+java镜像和容器
xiaogg3678的专栏
11-01 703
docker部署nginx+nacos+redis+java镜像和容器
短信登录的实现-redis和session的比较
2301_79748665的博客
10-29 794
我们之前只有一个拦截器，但是拦截的路径不是所有，如果用户一直访问的是不需要拦截的路径，那么他的token就不会刷新，就会失去登录状态，我们可以再加一个拦截器，第一个拦截一切路径，并且刷新有效期，第二个做登录校验；用户信息的key使用一个token来保存，一个是保证key的唯一性，一个是保证数据的安全性，因为token也就是key是要存在浏览器中的；因为session是存储在tomcat服务器中的，我们将来部署集群进行负载均衡，那么我们存储在一台tomcat服务器的数据无法实现共享；
【Redis：原理、架构与应用】
qq_42060170的博客
10-30 859
Redis（Remote Dictionary Server）是一款开源的内存数据库，以高性能和多样的数据结构著称，主要用作缓存系统、消息队列和会话管理等。它提供了丰富的数据结构，支持字符串、哈希、列表、集合等多种数据类型。Redis 具备快速读写、高可扩展性和灵活的数据持久化能力，是 NoSQL 数据库中的重要代表。Redis 将所有数据存储在内存中，因此访问速度极快，是处理高频、低延迟访问场景的理想选择。Redis 支持主从复制、哨兵、集群等高可用架构，能够在大规模分布式系统中实现高可靠性和数据冗余。
redis-trib.rb 删除redis 集群
08-11
要使用redis-trib.rb删除redis集群，需要按照以下步骤进行操作： 首先，确保您已经安装了Redis的Ruby客户端，并且可以从命令行访问redis-trib.rb工具。如果您没有安装该工具，请先下载并安装它。 接下来，打开终端...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

小钱要努力

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值