Reid主从复制简介

最新推荐文章于 2024-07-31 19:38:21 发布

weixin_34277853

最新推荐文章于 2024-07-31 19:38:21 发布

阅读量194

点赞数

文章标签：数据库运维操作系统

原文链接：http://blog.51cto.com/server110/1725619

版权

本文源地址：http://blog.sina.com.cn/s/blog_75ad98f30101fwqj.html

一、Redis Sentinel简介

Redis Sentinel是redis自带的集群管理工具，主要功能有

· 监控（Monitoring）： Redis Sentinel实时监控主服务器和从服务器运行状态。

· 提醒（Notification）：当被监控的某个Redis 服务器出现问题时， Redis Sentinel 可以向系统管理员发送通知，也可以通过 API 向其他程序发送通知。

· 自动故障转移（Automaticfailover）：当一个主服务器不能正常工作时，Redis Sentinel 可以将一个从服务器升级为主服务器，并对其他从服务器进行配置，让它们使用新的主服务器。当应用程序连接到 Redis 服务器时， Redis Sentinel会告之新的主服务器地址和端口。

Redis Sentinel是一个分布式系统，你可以在架构中运行多个 Sentinel 进程，这些进程通过相互通讯来判断一个主服务器是否断线，以及是否应该执行故障转移。

在配置Redis Sentinel时，至少需要有1个Master和1个Slave。当Master失效后,RedisSentinel会报出失效警告，并通过自动故障转移将Slave提升为Master，并提供读写服务;当失效的Master恢复后，Redis Sentinel会自动识别，将Master自动转换为Slave并完成数据同步。

通过RedisSentinel可以实现Redis零手工干预并且短时间内进行M-S切换，减少业务影响时间。

二、硬件需求

为了预防单节点故障，需要至少两台服务器，配置要求一致。

CPU	内存	磁盘
>2 CORES	>16 GB	>100 GB

redis使用版本为2.6

三、拓扑结构

在两个服务器中分别都部署Redis和Redis Sentinel。当Master中的Redis出现故障时（Redis进程终止、服务器僵死、服务器断电等），由Redis Sentinel将Master权限切换至Slave Redis中，并将只读模式更改为可读可写模式。应用程序通过Redis Sentinal确定当前Master Redis位置，进行重新连接。

根据业务模式，可以制定两种拓扑结构：单M-S结构和双M-S结构。如果有足够多的服务器，可以配置多M-S结构。

1、单M-S结构

单M-S结构特点是在Master服务器中配置Master Redis（Redis-1M）和Master Sentinel（Sentinel-1M）。Slave服务器中配置Slave Redis（Redis-1S）和Slave Sentinel（Sentinel-1S）。其中 Master Redis可以提供读写服务，但是Slave Redis只能提供只读服务。因此，在业务压力比较大的情况下，可以选择将只读业务放在Slave Redis中进行。

2、双M-S结构

双M-S结构的特点是在每台服务器上配置一个MasterRedis，同时部署一个Slave Redis。由两个RedisSentinel同时对4个Redis进行监控。两个Master Redis可以同时对应用程序提供读写服务，即便其中一个服务器出现故障，另一个服务器也可以同时运行两个Master Redis提供读写服务。缺点是两个Master redis之间无法实现数据共享，不适合存在大量用户数据关联的应用使用。

3、优劣对比

两个结构各有优缺点，分别适用于不同的应用场景：

单M-S结构适用于不同用户数据存在关联，但应用可以实现读写分离的业务模式。Master主要提供写操作，Slave主要提供读操作，充分利用硬件资源。

双（多）M-S结构适用于用户间不存在或者存在较少的数据关联的业务模式，读写效率是单M-S的两（多）倍，但要求故障时单台服务器能够承担两个Mater Redis的资源需求。

四、配置部署

单M-S结构和双M-S结构配置相差无几，下面以双M-S结构配置为例。

1、Redis配置

1)Master Redis配置

在Server-1M上配置Redis-1M

# viredis-1M.conf

##master redis-1M

##daemonize默认为no，修改为yes，启用后台运行

daemonize yes

# Redis 默认pid 文件位置redis.pid

#当运行多个 redis 服务时，需要指定不同的 pid 文件和端口

pidfileredis-1M.pid

##端口号

port6379

#验证口令

requirepass*************

masterauth*************

#绑定可连接Redis的IP地址,不设置将处理所有请求

# bind127.0.0.1

#客户端连接的超时时间,单位为秒,超时后会关闭连接（0为不设置）

timeout0

#日志记录等级

loglevelnotice

#设置数据库的个数

databases16

#日志刷新策略（Master禁用）

#save900 1

#save300 10

#save 6010000

#是否使用压缩镜像备份

rdbcompressionyes

#镜像备份文件的文件名

dbfilenameredis-1M_dump.rdb

#镜像备份路径，默认值为 ./

dir/redis/backup

#设置该数据库为其他数据库的从数据库,主库无需设置

#slaveof

#指定与主数据库连接时需要的密码验证，主库无需设置

#masterauth

#如果 slave-serve-stale-data 设置成 'no'，slave会返回"SYNCwith master in #progress"错误信息，但INFO和SLAVEOF命令除外。

slave-serve-stale-datayes

#客户端连接访问口令

#requirepass foobared

#限制同时连接的客户数量，防止过多的client导致内存耗尽。如果有足够内存可以不进行#设置

#maxclients10000

#设置redis能够使用的最大内存。

#maxmemory

##启用增量（Master禁用）

appendonlyno

#增量日志文件名，默认值为appendonly.aof

appendfilenameappendonly.aof

#设置对 appendonly.aof 文件进行同步的频率

#always 表示每次有写操作都进行同步,everysec 表示对写操作进行累积,每秒同步一次。

#no表示等操作系统进行数据缓存同步到磁盘，都进行同步,everysec 表示对写操作进行累#积,每秒同步一次

appendfsynceverysec

#是否重置Hash表

#设置成yes后redis将每100毫秒使用1毫秒CPU时间来对redis的hash表重新hash，##可降低内存的使用。当使用场景有较为严格的实时性需求,不能接受Redis时不时的对请##求有2毫秒的延迟的话，把这项配置为no。如果没有这么严格的实时性要求,可以设置为 #yes,能够尽可能快的释放内存。

activerehashingyes

##Slave开启只读模式

slave-read-onlyyes

在Server-1S上配置Redis-2M

# viredis-2M.conf

##master redis-2M

# Redis 默认pid 文件位置redis.pid

#当运行多个 redis 服务时，需要指定不同的 pid 文件和端口

pidfileredis-2M.pid

#镜像备份文件的文件名

dbfilenameredis-1M_dump.rdb

#日志刷新策略（Slave启用）

save 9001

save 30010

save 6010000

#-----------------其他参数与redis-1M保持一致-----------------

daemonizeyes

#……

2)Slave Redis配置

在Server-1S上配置Redis-1S

# Redis 默认pid 文件位置redis.pid

#当运行多个 redis 服务时，需要指定不同的 pid 文件和端口

pidfileredis-1S.pid

##端口号

port7379

#镜像备份文件的文件名

dbfilenameredis-1S_dump.rdb

#设置该数据库为其他数据库的从数据库,主库无需设置

Slaveofserver-1M 6379

##启用增量（Master禁用）

appendonlyyes

#-----------------其他参数与redis-1M保持一致-----------------

daemonizeyes

#……

在Server-1M上配置Redis-2S

# Redis 默认pid 文件位置redis.pid

#当运行多个 redis 服务时，需要指定不同的 pid 文件和端口

pidfileredis-2S.pid

##端口号

port7379

#镜像备份文件的文件名

dbfilenameredis-2S_dump.rdb

#设置该数据库为其他数据库的从数据库,主库无需设置

Slaveofserver-1S 6379

#-----------------其他参数与redis-2M保持一致-----------------

daemonizeyes

#……

2、Redis Sentinel配置

在Server-1M上配置Sentinel-1M

visentinel-1M.conf

#Master redis-1M

#hostname server-1M

#ip 192.168.84.129

#端口号

port 26379

sentinel monitor server-1M 192.168.84.1296379 1

sentinel down-after-milliseconds server-1M5000

sentinel failover-timeout server-1M 900000

sentinel can-failover server-1M yes

sentinel parallel-syncs server-1M 1

#Master redis-1S

#hostname server-1S

#ip 192.168.84.128

sentinel monitor server-1S 192.168.84.1286379 1

sentinel down-after-milliseconds server-1S5000

sentinel failover-timeout server-1S 900000

sentinel can-failover server-1S yes

sentinel parallel-syncs server-1S 1

在Server-1S上配置Sentinel-1S

#Masterredis-1M

#hostnameserver-1M

#ip192.168.84.128

#端口号

port27379

sentinelmonitor server-1M 192.168.84.129 6379 1

sentineldown-after-milliseconds server-1M 5000

sentinelfailover-timeout server-1M 900000

sentinelcan-failover server-1M yes

sentinelparallel-syncs server-1M 1

#Masterredis-1S

#hostnameserver-1S

#ip192.168.84.128

sentinelmonitor server-1S 192.168.84.128 6379 1

sentineldown-after-milliseconds server-1S 5000

sentinelfailover-timeout server-1S 900000

sentinelcan-failover server-1S yes

sentinelparallel-syncs server-1S 1

3、启动服务

Server-1M启动redis

redis-serverredis-1M.conf

redis-serverredis-2M.conf

Server-1S启动redis

redis-serverredis-1S.conf

redis-serverredis-2S.conf

检测同步

Master日志检查：

[28162]10 Nov 23:32:11.810 * DB loaded from append only file: 0.000 seconds

[28162]10 Nov 23:32:11.810 * The server is now ready to accept connections on port6379

[28162]10 Nov 23:32:35.360 * Slave ask for synchronization

[28162]10 Nov 23:32:35.360 * Starting BGSAVE for SYNC

[28162]10 Nov 23:32:35.361 * Background saving started by pid 28170

[28170]10 Nov 23:32:35.373 * DB saved on disk

[28170]10 Nov 23:32:35.375 * RDB: 0 MB of memory used by copy-on-write

[28162]10 Nov 23:32:35.437 * Background saving terminated with success

[28162]10 Nov 23:32:35.438 * Synchronization with slave succeeded

Slave日志检查：

[28091]10 Nov 23:27:15.908 * DB loaded from append only file: 0.001 seconds

[28091]10 Nov 23:27:15.908 * The server is now ready to accept connections on port6389

[28091]10 Nov 23:27:15.944 * Connecting to MASTER...

[28091]10 Nov 23:27:15.947 * MASTER <-> SLAVE sync started

[28091]10 Nov 23:27:15.951 * Non blocking connect for SYNC fired the event.

[28091]10 Nov 23:27:15.952 * Master replied to PING, replication can continue...

[28091]10 Nov 23:27:15.990 * MASTER <-> SLAVE sync: receiving 50 bytes frommaster

[28091]10 Nov 23:27:15.990 * MASTER <-> SLAVE sync: Loading DB in memory

[28091]10 Nov 23:27:15.991 * MASTER <-> SLAVE sync: Finished with success

[28091]10 Nov 23:27:15.993 * Background append only file rewriting started by pid28094

[28094]10 Nov 23:27:15.998 * SYNC append only file rewrite performed

[28094]10 Nov 23:27:15.998 * AOF rewrite: 0 MB of memory used by copy-on-write

[28091]10 Nov 23:27:16.047 * Background AOF rewrite terminated with success

[28091]10 Nov 23:27:16.047 * Parent diff successfully flushed to the rewritten AOF (0bytes)

[28091]10 Nov 23:27:16.048 * Background AOF rewrite finished successfully

启动sentinel服务

redis-server sentinel-1M.conf --sentinel

[28156]10 Nov 23:33:22.337 * +slave slave 192.168.84.129:6389 192.168.84.129 6389@server-1S 192.168.84.128 6379

[28156]10 Nov 23:39:37.071 # +sdown sentinel 192.168.84.128:26389 192.168.84.128 26389@server-1S 192.168.84.128 6379

[28156]10 Nov 23:39:37.072 # +sdown sentinel 192.168.84.128:26389 192.168.84.128 26389@server-1M 192.168.84.129 6379

[28156]10 Nov 23:40:05.438 # -sdown sentinel 192.168.84.128:26389 192.168.84.128 26389@server-1S 192.168.84.128 6379

[28156]10 Nov 23:40:05.438 # -sdown sentinel 192.168.84.128:26389 192.168.84.128 26389@server-1M 192.168.84.129 6379

[28156]10 Nov 23:40:10.262 * -dup-sentinel masterserver-1S 192.168.84.128 6379#duplicate of 192.168.84.128:26389 or e453a45a5e1421519dcbe00a199f203579b27b0f

[28156]10 Nov 23:40:10.263 * +sentinel sentinel 192.168.84.128:26389 192.168.84.12826389 @server-1S 192.168.84.128 6379

[28156]10 Nov 23:40:10.263 * -dup-sentinel masterserver-1M 192.168.84.129 6379#duplicate of 192.168.84.128:26389 or e453a45a5e1421519dcbe00a199f203579b27b0f

[28156]10 Nov 23:40:10.263 * +sentinel sentinel 192.168.84.128:26389 192.168.84.12826389 @server-1M 192.168.84.129 6379

redis-serversentinel-1S.conf --sentinel

[16383]10 Nov 23:40:05.499 * +slave slave 192.168.84.129:6389 192.168.84.129 6389@server-1S 192.168.84.128 6379

[16383]10 Nov 23:40:05.500 * +slave slave 192.168.84.128:6389 192.168.84.128 6389@server-1M 192.168.84.129 6379

[16383]10 Nov 23:40:06.098 * +sentinel sentinel 192.168.84.129:26379 192.168.84.12926379 @server-1S 192.168.84.128 6379

[16383]10 Nov 23:40:08.404 * +sentinel sentinel 192.168.84.129:26379 192.168.84.12926379 @server-1M 192.168.84.129 6379

4、故障模拟检测

模拟redis-1M（Master192.168.84.129 6379）故障，sentinel自动检测状态，然后切换至redis-1S（Slave 192.168.84.128 6389）,并将redis-1M转移为redis-1S的slave，状态为+sdown。

[28156]11 Nov 00:42:48.431 # +sdown masterserver-1M 192.168.84.129 6379

[28156]11 Nov 00:42:48.431 # +odown masterserver-1M 192.168.84.129 6379 #quorum 1/1

[28156]11 Nov 00:42:56.570 # +failover-detected masterserver-1M 192.168.84.129 6379

[28156]11 Nov 00:42:56.670 # +failover-end masterserver-1M 192.168.84.129 6379

[28156]11 Nov 00:42:56.670 # +switch-masterserver-1M 192.168.84.129 6379192.168.84.128 6389

[28156]11 Nov 00:42:57.055 * +sentinel sentinel 192.168.84.128:26389 192.168.84.12826389 @server-1M 192.168.84.128 6389

[28156]11 Nov 00:43:01.688 # +sdown slave 192.168.84.129:6379 192.168.84.129 6379@server-1M 192.168.84.128 6389

转载于:https://blog.51cto.com/server110/1725619

weixin_34277853

关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
Reid主从复制简介

本文源地址：http://blog.sina.com.cn/s/blog_75ad98f30101fwqj.html一、Redis Sentinel简介Redis Sentinel是redis自带的集群管理工具，主要功能有·监控（Monitoring）： Redis Sentinel实时监控主服务器和从服务器运行状态。·提醒（Notificat...
复制链接

扫一扫