redis数据库集群三种模式

最新推荐文章于 2024-05-28 13:41:46 发布
最新推荐文章于 2024-05-28 13:41:46 发布
阅读量330 收藏
点赞数
文章标签： 数据库 开发工具 运维

环境规划:

172.16.8.23    node1   172.16.8.24    node2

172.16.8.178  node3   172.16.8.179  node4


一.主从复制

(1).节点模式分为master节点和slave节点，master节点负责写入(也可读)，slave节点必须是只读的，master和slave有任意节点宕不能自己切换或恢复

(2).一个master后面可以有多个slave，一个slave前端只能有一个master节点

(3). 当slave启动后，主动向master发送SYNC命令

1.下载安装redis包

[root@node1 ~]# wget  http://120.52.51.18/download.redis.io/releases/redis-5.0.4.tar.gz

[root@node1 ~]# tar xvf redis-5.0.4.tar.gz -C /opt/

[root@node1 ~]# yum install make gcc gcc-c++ -y

[root@node1 ~]# cd /opt/redis-5.0.4/

[root@node1 redis-5.0.4]# make && make install

2.master修改redis配置文件

[root@node1 redis-5.0.4]# vim redis.conf 

bind 172.16.8.23

daemonize yes

requirepass system123

[root@node1 redis-5.0.4]# src/redis-server redis.conf 

3.slave修改配置文件(每个从库都是这样)

[root@node2 redis-5.0.4]# vim redis.conf 

bind 172.16.8.24

daemonize yes

replicaof 172.16.8.23 6379

masterauth system123

[root@node2 redis-5.0.4]# src/redis-server redis.conf 

4.在master节点检查主从状态

[root@node1 redis-5.0.4]# src/redis-cli -h 172.16.8.23

172.16.8.23:6379> AUTH system123

OK

172.16.8.23:6379> info replication

# Replication

role:master

connected_slaves:3

slave0:ip=172.16.8.24,port=6379,state=online,offset=378,lag=0

slave1:ip=172.16.8.178,port=6379,state=online,offset=378,lag=1

slave2:ip=172.16.8.179,port=6379,state=online,offset=378,lag=1

master_replid:7dd8e0a27bddfe2c275b4c9d83f6f2bac27ea1d9

master_replid2:0000000000000000000000000000000000000000

master_repl_offset:378

second_repl_offset:-1

repl_backlog_active:1

repl_backlog_size:1048576

repl_backlog_first_byte_offset:1

repl_backlog_histlen:378

172.16.8.23:6379> 


二.哨兵模式

(1).监控主从数据库是否正常运行，master出现故障时，自动将slave转化为master

(2).多哨兵配置的时候，哨兵之间也会自动监控，多个哨兵可以监控同一个redis

1.在master节点配置

[root@node1 redis-5.0.4]# vim sentinel.conf 

protected-mode no

daemonize yes             --服务后台启动

logfile "/tmp/1.log"      --生成日志

sentinel monitor mymaster 172.16.8.23 6379 1    --mymaster自己定义,IP地址,端口,哨兵个数

sentinel auth-pass mymaster system123              --redis密码

[root@node1 redis-5.0.4]# src/redis-sentinel sentinel.conf

[root@node1 redis-5.0.4]# src/redis-cli -h 172.16.8.23

172.16.8.23:6379> AUTH system123

OK

172.16.8.23:6379> info replication

# Replication

role:master

connected_slaves:3

slave0:ip=172.16.8.24,port=6379,state=online,offset=4765,lag=1

slave1:ip=172.16.8.179,port=6379,state=online,offset=4765,lag=1

slave2:ip=172.16.8.178,port=6379,state=online,offset=4765,lag=1

master_replid:a7978e6db27163acc91cbc673114855f98dbc7a8

master_replid2:0000000000000000000000000000000000000000

master_repl_offset:4765

second_repl_offset:-1

repl_backlog_active:1

repl_backlog_size:1048576

repl_backlog_first_byte_offset:1

repl_backlog_histlen:4765

172.16.8.23:6379> SHUTDOWN          --将master的redis服务关闭

not connected> exit

[root@node1 redis-5.0.4]# tailf /tmp/1.log       --查看重新选master角色的日志

30006:X 28 Mar 2019 19:09:25.753 # +sdown master mymaster 172.16.8.23 6379

30006:X 28 Mar 2019 19:09:25.754 # +odown master mymaster 172.16.8.23 6379 #quorum 1/1

30006:X 28 Mar 2019 19:09:33.124 # +new-epoch 2

30006:X 28 Mar 2019 19:09:33.124 # +try-failover master mymaster 172.16.8.23 6379

30006:X 28 Mar 2019 19:09:33.129 # +vote-for-leader 2d798dd3a84c9f80b5f1a6c73fe6f2092b65faaa 2

30006:X 28 Mar 2019 19:09:33.129 # +elected-leader master mymaster 172.16.8.23 6379

30006:X 28 Mar 2019 19:09:33.129 # +failover-state-select-slave master mymaster 172.16.8.23 6379

30006:X 28 Mar 2019 19:09:33.184 # +selected-slave slave 172.16.8.178:6379 172.16.8.178 6379 @ mymaster 172.16.8.23 6379

30006:X 28 Mar 2019 19:09:33.184 * +failover-state-send-slaveof-noone slave 172.16.8.178:6379 172.16.8.178 6379 @ mymaster 172.16.8.23 6379

30006:X 28 Mar 2019 19:09:33.268 * +failover-state-wait-promotion slave 172.16.8.178:6379 172.16.8.178 6379 @ mymaster 172.16.8.23 6379

30006:X 28 Mar 2019 19:09:34.182 # +promoted-slave slave 172.16.8.178:6379 172.16.8.178 6379 @ mymaster 172.16.8.23 6379

30006:X 28 Mar 2019 19:09:34.182 # +failover-state-reconf-slaves master mymaster 172.16.8.23 6379

30006:X 28 Mar 2019 19:09:34.234 * +slave-reconf-sent slave 172.16.8.179:6379 172.16.8.179 6379 @ mymaster 172.16.8.23 6379

30006:X 28 Mar 2019 19:09:35.170 * +slave-reconf-inprog slave 172.16.8.179:6379 172.16.8.179 6379 @ mymaster 172.16.8.23 6379

30006:X 28 Mar 2019 19:12:34.200 # +failover-end-for-timeout master mymaster 172.16.8.23 6379

30006:X 28 Mar 2019 19:12:34.201 # +failover-end master mymaster 172.16.8.23 6379

30006:X 28 Mar 2019 19:12:34.201 * +slave-reconf-sent-be slave 172.16.8.179:6379 172.16.8.179 6379 @ mymaster 172.16.8.23 6379

30006:X 28 Mar 2019 19:12:34.201 * +slave-reconf-sent-be slave 172.16.8.24:6379 172.16.8.24 6379 @ mymaster 172.16.8.23 6379

30006:X 28 Mar 2019 19:12:34.201 * +slave-reconf-sent-be slave 172.16.8.178:6379 172.16.8.178 6379 @ mymaster 172.16.8.23 6379

30006:X 28 Mar 2019 19:12:34.201 # +switch-master mymaster 172.16.8.23 6379 172.16.8.178 6379

30006:X 28 Mar 2019 19:12:34.201 * +slave slave 172.16.8.179:6379 172.16.8.179 6379 @ mymaster 172.16.8.178 6379

30006:X 28 Mar 2019 19:12:34.202 * +slave slave 172.16.8.24:6379 172.16.8.24 6379 @ mymaster 172.16.8.178 6379

30006:X 28 Mar 2019 19:12:34.202 * +slave slave 172.16.8.23:6379 172.16.8.23 6379 @ mymaster 172.16.8.178 6379

30006:X 28 Mar 2019 19:13:04.272 # +sdown slave 172.16.8.24:6379 172.16.8.24 6379 @ mymaster 172.16.8.178 6379

30006:X 28 Mar 2019 19:13:04.272 # +sdown slave 172.16.8.23:6379 172.16.8.23 6379 @ mymaster 172.16.8.178 6379

2.在 172.16.8.178节点查看master节点

[root@node3 redis-5.0.4]# src/redis-cli -h 172.16.8.178       --node3节点被选为master角色

172.16.8.178:6379> info replication

# Replication

role:master

connected_slaves:0

master_replid:ebd18241e560c1ccea06bc4f528071bdc189405a

master_replid2:a7978e6db27163acc91cbc673114855f98dbc7a8

master_repl_offset:12131

second_repl_offset:6452

repl_backlog_active:1

repl_backlog_size:1048576

repl_backlog_first_byte_offset:1

repl_backlog_histlen:12131

172.16.8.178:6379> 


三.集群模式(必须要有6台redis服务器,node1,2,3分别安装三个redis,node4安装三个redis)

1.修改配置文件,启动服务

[root@node1 redis-5.0.4]# vim redis.conf      --6台redis配置文件一样,都启动服务

bind 本机IP

daemonize yes 

appendonly yes

cluster-enabled yes

cluster-config-file nodes_node1.conf

cluster-node-timeout 15000

[root@node1 redis-5.0.4]# src/redis-cli -h 172.16.8.23      --必须清空redis中的数据

172.16.8.23:6379> FLUSHALL

OK

172.16.8.23:6379> SHUTDOWN

not connected> exit

[root@node1 redis-5.0.4]# src/redis-server  redis.conf 

13536:C 01 Apr 2019 15:26:15.629 # oO0OoO0OoO0Oo Redis is starting oO0OoO0OoO0Oo

13536:C 01 Apr 2019 15:26:15.629 # Redis version=5.0.4, bits=64, commit=00000000, modified=0, pid=13536, just started

13536:C 01 Apr 2019 15:26:15.629 # Configuration loaded

9785:C 01 Apr 2019 14:23:34.529 # oO0OoO0OoO0Oo Redis is starting oO0OoO0OoO0Oo

9785:C 01 Apr 2019 14:23:34.529 # Redis version=5.0.4, bits=64, commit=00000000, modified=0, pid=9785, just started

9785:C 01 Apr 2019 14:23:34.529 # Configuration loaded

[root@node1 redis-5.0.4]#

2.创建集群,使用集群

[root@node1 redis-5.0.4]# ./src/redis-cli --cluster create 172.16.8.23:6379 172.16.8.24:6379 172.16.8.178:6379 172.16.8.179:6379 

172.16.8.179:6380 172.16.8.179:6381 --cluster-replicas 1    --创建集群成功,6个redis节点(如果创建集群时出错,必须

删除flushall数据和删除nodes_6379.conf文件后启 动redis服务)

>>> Performing Cluster Check (using node 172.16.8.23:6379)

M: 06026556e78db8599f13095038c15682fda37ab4 172.16.8.23:6379

   slots:[0-5460] (5461 slots) master

   1 additional replica(s)

S: 479ee18ba7b8f94870b9c7eaf474a5039024a53f 172.16.8.179:6381

   slots: (0 slots) slave

   replicates 12d0de4285f5801cf8de7683da7a50e354cd5d21

S: 9bd04e9109fad35b05e68028d3eb6c11886afe0e 172.16.8.179:6379

   slots: (0 slots) slave

   replicates 454cc89b5a6644199ae7895672c29078208495b9

M: 12d0de4285f5801cf8de7683da7a50e354cd5d21 172.16.8.24:6379

   slots:[5461-10922] (5462 slots) master

   1 additional replica(s)

M: 454cc89b5a6644199ae7895672c29078208495b9 172.16.8.178:6379

   slots:[10923-16383] (5461 slots) master

   1 additional replica(s)

S: ae36c01a1ec426f6443b01857b50dae868dc9a11 172.16.8.179:6380

   slots: (0 slots) slave

   replicates 06026556e78db8599f13095038c15682fda37ab4

[OK] All nodes agree about slots configuration.

>>> Check for open slots...

>>> Check slots coverage...

[OK] All 16384 slots covered.

[root@node1 redis-5.0.4]# src/redis-cli --cluster help    --帮助信息

[root@node1 redis-5.0.4]# src/redis-cli --cluster info 172.16.8.23:6379      --查看集群状态信息

172.16.8.23:6379 (06026556...) -> 0 keys | 5461 slots | 1 slaves.

172.16.8.24:6379 (12d0de42...) -> 0 keys | 5462 slots | 1 slaves.

172.16.8.178:6379 (454cc89b...) -> 0 keys | 5461 slots | 1 slaves.

[OK] 0 keys in 3 masters.

0.00 keys per slot on average.

[root@ node1 redis-5.0.4]# src/redis-cli -h 172.16.8.23 -c -p 6379     --在node1节点写入数据

172.16.8.23:6379> set k1 v1

-> Redirected to slot [12706] located at 172.16.8.178:6379

OK

172.16.8.178:6379> KEYS *

1) "k1"

172.16.8.178:6379> get k1

"v1"

172.16.8.178:6379> 

3.在其它节点查看数据

[root@ node2 redis-5.0.4]# src/redis-cli -h 172.16.8.24 -c -p 6379     --在node2节点查看数据

172.16.8.24:6379> get k1

-> Redirected to slot [12706] located at 172.16.8.178:6379

"v1"

172.16.8.178:6379> 



错误处理:

(1).redis.conf配置文件有开启auth认证,需要关闭认证

[root@node1 redis-5.0.4]# redis-cli --cluster create 172.16.8.23:6379 172.16.8.24:6379 172.16.8.178:6379 172.16.8.179:6379 --cluster-replicas 

1

[ERR] Node 172.16.8.23:6379 NOAUTH Authentication required.

[root@node1 redis-5.0.4]# 

解决方法:

[root@node1 redis-5.0.4]# vim redis.conf

#masterauth system123

[root@node1 redis-5.0.4]#

(2).每个redis必须为空,没有数据

[root@node1 redis-5.0.4]# redis-cli --cluster create 172.16.8.23:6379 172.16.8.24:6379 172.16.8.178:6379 172.16.8.179:6379 --cluster-replicas 

1

[ERR] Node 172.16.8.23:6379 is not empty. Either the node already knows other nodes (check with CLUSTER NODES) or contains some key in 

database 0.

[root@node1 redis-5.0.4]# 

解决方法:

[root@node1 redis-5.0.4]#src/redis-cli -h 172.16.8.24

172.16.8.24:6379> FLUSHALL

OK

172.16.8.24:6379> 

(3).redis节点数据必须要6个,6个以下不行

[root@node1 redis-5.0.4]# ./src/redis-cli --cluster create 172.16.8.23:6379 172.16.8.24:6379 172.16.8.178:6379 --cluster-replicas 1

*** ERROR: Invalid configuration for cluster creation.

*** Redis Cluster requires at least 3 master nodes.

*** This is not possible with 3 nodes and 1 replicas per node.

*** At least 6 nodes are required.

[root@node1 redis-5.0.4]#

(4).集群槽位重新分配(重新启动服务时必须清空redis数据和删除nodes_6379.conf文件)

[OK] All nodes agree about slots configuration.

>>> Check for open slots...

>>> Check slots coverage...

[ERR] Not all 16384 slots are covered by nodes.

[root@node1 redis-5.0.4]# 

解决方法:

[root@node1 redis-5.0.4]# src/redis-cli --cluster help                        --帮助信息

[root@node1 redis-5.0.4]# src/redis-cli --cluster check 172.16.8.23:6379       --检查各节点的状态

[root@node1 redis-5.0.4]# src/redis-cli --cluster fix 172.16.8.23:6379            --修复节点

[root@node1 redis-5.0.4]# src/redis-cli --cluster reshard 172.16.8.23:6379    --重新分配节点




来自 “ ITPUB博客 ” ，链接：http://blog.itpub.net/25854343/viewspace-1350258/，如需转载，请注明出处，否则将追究法律责任。

转载于:http://blog.itpub.net/25854343/viewspace-1350258/

cny0120
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
redis数据库部署（三）集群模式
wulei_123456789的博客
12-13 699
目录 一、Redis集群模式 1、集群的作用 2、集群模式的数据分片 3 、集群模式的主从复制模型 二、集群模式部署操作 1、每台服务器改名​​ 2、 创建目录复制配置文件到对应的节点上 3、 修改主配置文件，设置开启群集功能 4、在Master1节点上将配置文件到其他两台Master节点中 5、将Master节点上的配置文件再复制到各自的从服务器中 6、修改除Master1节点之外的所有服务器的监听地址及端口 7、启动所有redis节点 8、启动群集 ​9、测试集群...
数据库集群
qq_47800859的博客
01-08 336
集群的概述 一主一从模式（手动） 一主一从模式（自动） 双主双从模式
MySQL集群最全详解(图文全面总结)
zznn0306的博客
05-28 3230
主从复制是 MySQL 中最常用的集群模式之一，一个主服务器（Master）负责所有的写操作，并将这些更改，异步复制到一个或多个从服务器（Slave）上。在实际应用中，为了进一步提高数据库的性能和扩展性，可以采用读写分离、和分片法（分库分表）相结合的方式构建 MySQL 集群。MyCAT 是一个开源的数据库中间件，MyCAT 通过配置规则将， SQL 请求路由到相应的数据库、或表。从服务器上的读取和应用：从服务器读取主服务器上的二进制日志，并在从服务器上重放这些日志。
数据库学习——集群
m0_53127728的博客
05-11 3360
MySQL主从复制 、MySQL读写分离
MongoDB集群模式详解及应用实战
yemuxiaweiliang的博客
11-29 2418
MongoDB集群模式详解及应用实战
数据库集群技术有哪些？
weixin_30408739的博客
01-06 353
数据库集群技术有哪些？集群软件的分类：一般来讲，集群软件根据侧重的方向和试图解决的问题，分为三大类：高性能集群（High performance cluster，HPC）、负载均衡集群（Load balance cluster， LBC），高可用性集群（High availability cluster，HAC）。按照集群工作的层面，可分为：数据库服务器集群，应用服务器集群，交换机集群等按照集群的...
redis数据库集群部署
最新发布
06-24
### Redis数据库集群部署知识点详解 #### 一、Redis简介与特性 **Redis**（Remote Dictionary Server）是一款开源的键值(key-value)存储系统，它以其卓越的性能和灵活性，在众多NoSQL数据库中脱颖而出。Redis主要...
redis集群 三主三从模式
11-02
总的来说，"redis集群 三主三从模式"提供了一种健壮的分布式数据库解决方案，利用Docker和docker-compose简化了部署流程。熟悉并掌握这种配置方法，对于保障高可用性和数据安全性至关重要。在实际应用中，还应考虑...
Redis-Cluster集群模式部署
06-01
Redis Cluster 集群模式部署 本文将详细介绍 Redis Cluster 集群模式部署的步骤和配置过程。Redis Cluster 是 Redis 的一个高可用解决方案，通过将多个 Redis 节点组合成集群，提高 Redis 的可用性和性能。 环境...
Redis集群模式详解，三种集群模式的详细介绍
05-20
通过以上三种集群模式的介绍，可以看出每种模式都有其特定的应用场景。对于需要简单高可用性的场景，主从复制模式是一个不错的选择；对于更高级的自动故障转移需求，则可以考虑使用哨兵模式；而面对大规模数据存储和...
实验（四） Redis分布式数据库集群搭建与配置
11-13
分布式数据库集群是Redis为了实现高可用性和水平扩展而设计的一种架构。 首先，了解Redis集群的基本概念是至关重要的。Redis集群采用了分片（Sharding）策略，将数据分散到多个节点上，每个节点负责一部分数据的...
Redis-5.0.0集群配置
11-01
　　本文档基于以前写的《Redis-3.0.5集群配置》和《Redis-4.0.11集群配置》。 　　redis-3.0.0开始支持集群，redis-4.0.0开始支持module，redis-5.0.0开始支持类似于kafka那样的消息队列。 　　本文参考官方文档而成：http://redis.io/topics/cluster-tutorial，不适用redis-5.0.0以下版本，原因是从redis-5.0.0版本开始，redis-trib.rb的功能被redis-cli替代了。 　　redis-5.0.0以下版本的安装和部署，可参考：https://blog.csdn.net/Aquester/article/details/50150163。 　　redis运维工具和部署工具：https://github.com/eyjian/redis-tools。
DM8 达梦数据库8 常见集群方式及建议
lugia1208的博客
08-18 946
DM8 达梦数据库8 常见集群方式及建议
Redis三种集群模式介绍及搭建
QHJJHQ的博客
02-05 9425
redis集群 redis集群就是多个redis节点一起工作的模式。它没有代理节点和中心节点，各个节点平等。 redis集群提供了以下两个好处 1、将数据自动切分(split)到多个节点 2、当集群中的某一个节点故障时，redis还可以继续处理客户端的请求。 集群中的主从复制 集群中的每个节点都有1个至N个复制品，其中一个为主节点，其余的为从节点，如果主节点下线了，集群就会把这个主节点的一个从节点设置为新的主节点，继续工作。这样集群就不会因为一个主节点的下线而无法正常工作。 注意： 1、如果
Redis的三种集群方案
用于记录学习的过程，不做商业用途。
03-08 3220
目录 一、主从复制模式 基本原理 命令的不同 优点 缺点 二、哨兵模式（Sentinel） 基本原理 哨兵的作用 优点 缺点 三、Cluster模式 基本原理 Cluster模式的特点（采用无中心结构） Cluster模式的具体工作机制 优点 缺点 一、主从复制模式 基本原理 主从复制模式包含一个主数据库实例（master），一个或多个从数据库实例（slave） 客户端可以对主数据库进行读写操作，对从数据库只能进行读操作，主数据库写入的数据会实时自动同步
redis多机数据库-集群模式之节点
weixin_42120698的博客
03-07 400
节点 一个节点就是一台运行在集群模式下的REDIS服务器 以集群模式，启动一台redis服务器 节点将继续使用单机模式中的服务器组件，如： 1 继续使用文件处理器处理命令的请求，和命令 的返回 2 继续使用RDB持久化模块和AOF持久化模块执行 持久化工作 3 继续使用发布与订阅模块执行PUBLISH、SUBSCRIBE 等命令 4 继续使用复制模块来继续节点的...
mysql单节点模式_MySQL高可用工具Orchestrator系列一：单节点模式安装
weixin_30587341的博客
01-27 134
背 景MySQL高可用方案有很多种，常见的有：keepalived、MHA、Galera、MGR、Orchestrator、replication-manager等。本系列将介绍在GitHub被使用的Orchestrator方案。本篇文章先介绍最基础的单节点模式的安装。环 境orchestrator机器：10.10.30.146orchestrator后端元数据库MySQL：10.10.30....
redis集群部署
weixin_43750002的博客
09-03 705
Redis集群特性： redis集群方式支持主从自动切换 redis集群只有一个库，单例或者主从的话有多个库 redis集群去中心化，只要通过其中一个入口连接即可 安装Redis 关闭防火墙/对应的端口 关闭防火墙systemctl stop firewalld 开放指定端口firewall-cmd --zone=public --add-port=1935/tcp --permanent 下载redis或者移动对应的zip wget http:
redis分片集群和redis集群模式
05-24
Redis分片集群和Redis集群模式都是用于将Redis数据库分布在多个节点上，以实现高可用性和可扩展性。 Redis分片集群是将数据按照一定的规则分散到多个Redis节点上，每个节点只存储部分数据。当需要访问某个key时，...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值