Redis主从复制、持久化

于 2022-03-29 23:06:47 发布
阅读量500 收藏
点赞数
分类专栏： redis了解 文章标签： 运维 linux redis
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_60092693/article/details/123537491
版权

Redis主从复制

一、Redis主从复制工作原理
类似于mysql，Redis提供存储数据的服务结构，分为主/从2种角色主服务器接收客户端访问从服务器与主服务器保持数据一致支持的服务结构有：一主一从，一主多从，主从从。
1、工作原理（背诵）
slave向master发送sync(同步)命令
master启动后台存盘进程，并收集所有修改数据命令
master完成后台存盘后，传送整个数据文件到slave
slave接收数据文件，加载到内存中完成首次完全同步
后续有新数据产生时，master继续收集数据修改命令依次传给slave完成同步

2、命令行配置命令（临时配置）

slaveof  主服务器lp  端口号
info replication			//查看服务器的角色
slaveof no one			//反客为主（临时恢复为主数据库服务器)
每台redis服务器默认都是主master角色。
永久配置（永久配置）
vim +282 /etc/redis/6379.conf
slaveof 主服务器lp端口号

二、配置主从结构

192.168.1.11-13 一组两从

redis安装

rpm -q gcc || yum -y install gcc
tar -zxf redis-4.0.8.tar.gz   	
cd redis-4.0.8/
make && make install
./utils/install_server.sh   

[root@rd1 ~]# /etc/init.d/redis_6379 stop
Stopping ...
Redis stopped
[root@rd1 ~]# vim +70 /etc/redis/6379.conf
70   bind  192.168.1.11
93   port  6379
[root@rd1 ~]# /etc/init.d/redis_6379  start 
[root@rd1 ~]# ss -ntulp | grep 6379
tcp    LISTEN     0      128    192.168.1.11:6379  *:*    users:(("redis-server",..
[root@lnmp redis-4.0.8]# vim +43 /etc/init.d/redis_6379
	$CLIEXEC -h 192.168.1.11 -p 6379  shutdown
[root@rd1 redis-4.0.8]# /etc/init.d/redis_6379    stop
Stopping ...
Redis stopped

rd2从

[root@rd2 redis-4.0.8]# redis-cli -h 192.168.1.12 -p 6379
192.168.1.12:6379> info replication     #默认就是master
# Replication
role:master
connected_slaves:0
192.168.1.12:6379> slaveof 192.168.1.11 6379		#指定主slaveof  ip 端口
OK
192.168.1.12:6379> info replication
# Replication
role:slave
master_host:192.168.1.11

rd3从

[root@rd3 ~]# redis-cli -h 192.168.1.13 -p 6379
192.168.1.13:6379> slaveof 192.168.1.11 6379
OK
192.168.1.13:6379> info replication
# Replication
role:slave
master_host:192.168.1.11

rd1查看

[root@rd1 ~]# redis-cli -h 192.168.1.11 -p 6379
192.168.1.11:6379> info replication
# Replication
role:master
connected_slaves:2
slave0:ip=192.168.1.12,port=6379,state=online,offset=756,lag=1
slave1:ip=192.168.1.13,port=6379,state=online,offset=756,lag=1

恢复成主反客为主

1）永久修改
 vim +282  /etc/redis/6379.conf
#slaveof  192.168.1.11  6379  				#注释掉配置重启服务即可
2）临时修改
192.168.1.12> slaveof no one			#命令行

配置带验证的主从

主服务器

临时
[root@rd1 ~]# redis-cli -h 192.168.1.11 -p 6379
192.168.1.11:6379> config set requirepass 123456		#临时设置，不需重启
192.168.4.51:6351> config rewrite   			#永久生效

永久
vim +501  /etc/redis/6379.conf
requirepass 123456

从服务器指定连接密码

[root@rd3 ~]# /etc/init.d/redis_6379    stop
[root@rd3 ~]# vim  /etc/redis/6379.conf
282  slaveof 192.168.1.11 6351 
289  masterauth 123456
[root@rd3 ~]# /etc/init.d/redis_6379  start
[root@rd3 ~]# redis-cli -h 192.168.1.13 -p 6379
192.168.1.13:6379> slaveof 192.168.1.11 6379		#重新指定一次
OK
192.168.1.13:6379> info replication
# Replication
role:slave
master_host:192.168.1.11
master_link_status:up      #未配置密码时master_link_status:down

四、哨兵服务：
哨兵服务的功能：服务运行后，监视配置文件中指定的主数据服务器，发现主服务器监视不到时，把对应的从升级为主数据库服务器。

rd1 配置了密码，也可以不配置

如果主从结构中的主服务器设置了连接密码，从rd2 rd3也要设置一样的连接密码

[root@rd2 ~]# redis-cli -h 192.168.1.12 -p 6379
192.168.1.12:6379> config set requirepass 123456
OK
192.168.1.12:6379> auth 123456
OK
192.168.1.12:6379> config get requirepass
1) "requirepass"
2) "123456"
192.168.1.12:6379> config rewrite
OK

配置哨兵服务，具体操作如下

rpm -q gcc || yum -y install gcc
tar -zxf redis-4.0.8.tar.gz   	
cd redis-4.0.8/
make && make install

创建并编辑主配置文件

[root@rd1 ~]# vim /etc/sentinel.conf
bind 192.168.1.14				#本机网卡IP
port 26379						#默认端口，可修改做多实例
sentinel monitor  mymaster 192.168.1.11 6379 1
#mymaster 自定义名字，  1   有一个sentine同意切换主，就能完成切换
sentinel auth-pass mymaster 123456

[root@rd1 ~]# redis-sentinel  /etc/sentinel.conf
4757:X 05 Mar 23:19:23.955 # oO0OoO0OoO0Oo Redis is starting oO0OoO0OoO0Oo
4757:X 05 Mar 23:19:23.955 # Redis version=4.0.8, bits=64, commit=00000000, modified=0, pid=4757, just started
4757:X 05 Mar 23:19:23.955 # Configuration loaded
4757:X 05 Mar 23:19:23.956 * Increased maximum number of open files to 10032 (it was originally set to 1024).
                _._
           _.-``__ ''-._
      _.-``    `.  `_.  ''-._           Redis 4.0.8 (00000000/0) 64 bit
  .-`` .-```.  ```\/    _.,_ ''-._
 (    '      ,       .-`  | `,    )     Running in sentinel mode
 |`-._`-...-` __...-.``-._|'` _.-'|     Port: 26379
 |    `-._   `._    /     _.-'    |     PID: 4757
  `-._    `-._  `-./  _.-'    _.-'
 |`-._`-._    `-.__.-'    _.-'_.-'|
 |    `-._`-._        _.-'_.-'    |           http://redis.io

[root@rd1 ~]# vim +43 /etc/init.d/redis_6379
	$CLIEXEC -h 192.168.1.11 -p 6379 -a 123456  shutdown
[root@rd1 ~]# /etc/init.d/redis_6379 stop
Stopping ...
Redis stopped

等待一下查看切换

4757:X 05 Mar 23:25:51.462 # +failover-end master mymaster 192.168.1.11 6379
4757:X 05 Mar 23:25:51.462 # +switch-master mymaster 192.168.1.11 6379 192.168.1.12 6379
4757:X 05 Mar 23:25:51.463 * +slave slave 192.168.1.13:6379 192.168.1.13 6379 @ mymaster 192.168.1.12 6379
[root@rd1 ~]# cat /etc/sentinel.conf
sentinel monitor mymaster 192.168.1.12 6379 1			#这里的监控的IP发生变化

宕机的主机redis服务启动，会自动做新master的从服务器并自动同步宕机期间的数据（需要人为指定主服务器的连接密码）

[root@rd1 ~]# /etc/init.d/redis_6379 start
[root@rd1 ~]# redis-cli -h 192.168.1.11 -p 6379 -a 123456
192.168.1.11:6379> info replication
# Replication
role:slave
master_host:192.168.1.12
master_port:6379
master_link_status:down

192.168.1.11:6379> config set masterauth 123456
OK
192.168.1.11:6379> config rewrite
OK
192.168.1.11:6379> info replication
# Replication
role:slave
master_host:192.168.1.12
master_port:6379
master_link_status:up

若将配置里的1 改成2 实验，停掉rd2。则不会发生切换，因为只有一个哨兵

4867:X 05 Mar 23:40:27.280 # Sentinel ID is d5ee2d775c8a391c6d03b1b18d2d0db2964eed63
4867:X 05 Mar 23:40:27.280 # +monitor master mymaster 192.168.1.12 6379 quorum 2
4867:X 05 Mar 23:41:34.800 # +sdown master mymaster 192.168.1.12 6379
能检测到master发生down,但是不会发生切换

你也 可以做多个的哨兵，防止因为网络问题引起的误判，如一主两从三哨兵

redis服务持久化

持久化把数据永久保存，实现方式有2种RDB、AOF，公司同时打开

1、RDB介绍
Redis数据库文件，全称RedisDataBase
文件数据持久化方式之一
数据持久化默认方式
按照指定时间间隔，将内存中的数据集快照写入硬盘
指定的就是数据库目录下的dump.rdb /var/lib/redis/6379/dump.rdb

1）RDB优化设置 save 900  1
数据从内存保存到硬盘的频率
[root@rd2 ~]# grep -i save /etc/redis/6379.conf
219:  save 900 1			//15分钟且有1个key改变即存盘
220:  save 300 10			//5分钟且有10个key改变即存盘
221:	save 60 10000		//1分钟且有10000个key改变即存盘
手动存盘
bgsave			//不阻塞写存盘
save			//阻塞写存盘save已基本被废弃

2）RDB配置文件的测试，验证存盘频率
[root@rd2 ~]# redis-cli -h 192.168.1.12 -a 123456 -p 6379  shutdown
[root@rd2 ~]# rm -rf /var/lib/redis/6379/*
[root@rd2 ~]# ls /var/lib/redis/6379/
[root@rd2 ~]# vim /etc/redis/6379.conf
save 900 1
#save 300 10
save 60 10000
save 120 10					#测试配置文件120s内且超出10个变量
[root@rd2 ~]# /etc/init.d/redis_6379  start
Starting Redis server...
[root@rd2 ~]# redis-cli -h 192.168.1.12 -a 123456 -p 6379
192.168.1.12:6379> set name1 tom
OK		# 在2分钟内存储 》= 10个变量
192.168.1.12:6379> exit
[root@rd2 ~]# ls  /var/lib/redis/6379/
dump.rdb

3)使用备份的dump.rdb文件恢复数据 备份文件

[root@rd2 ~]# cp /var/lib/redis/6379/dump.rdb  .   
[root@rd2 ~]# redis-cli -h 192.168.1.12 -a 123456 -p 6379
192.168.1.12:6379> flushall
192.168.1.12:6379> keys *
(empty list or set)
> exit
[root@rd2 ~]# /etc/init.d/redis_6379 stop
[root@rd2 ~]# rm -rf /var/lib/redis/6379/dump.rdb
[root@rd2 ~]# cp dump.rdb  /var/lib/redis/6379/ #也可以拷贝给其他主机操作，恢复数据
[root@rd2 ~]# /etc/init.d/redis_6379 start
[root@rd2 ~]# redis-cli -h 192.168.1.12 -a 123456 -p 6379
192.168.1.12:6379> keys *
1)"name1"

AOF介绍Append Only File
追加方式记录写操作的文件记录，redis服务所有写操作，类似mysql的bin_log日志
不断的将新的写操作，追加到文件的未尾，默认没有启用，使用cat命令可以查看文件内容

AOF优点
可以灵活设置持久化方式，出现意外宕机时，仅可能丢失1秒的数据
AOF缺点
持久化文件的体积通常会大于RDB方式，执行fsync策略时的速度可能会比RDB方式慢

1）启用AOF

[root@rd2 ~]# cat /etc/redis/6379.conf | grep -n append    #避免重启机器
673:  appendonly no
[root@rd2 ~]# redis-cli -h 192.168.1.12 -a 123456 -p 6379
192.168.1.12:6379> config set appendonly yes   //启用 ,线上服务器必须用命令行启用
OK
192.168.1.12:6379> config rewrite		//写进配置文件
OK
192.168.1.12:6379> config get appendonly
1) "appendonly"
2) "yes"
192.168.1.12:6379> exit
[root@rd2 ~]# ls /var/lib/redis/6379/
appendonly.aof  dump.rdb
#记录操作的文件，redis以aof文件为准，同时存在只看aof，不管dump是否有数据，直接覆盖，产生新的dump。
#且线上启用aof时，会记录内存里所有的变量。

2）AOF文件记录写操作的方式6379.conf

#appendfsync always			//时时记录，并完成磁盘同步
appendfsync everysec		//每秒记录一次，并完成磁盘同步，默认
#appendfsync no				//写入aof，不执行磁盘同步

3）触发日志重写(合并雷同命令)

auto-aof-rewrite-min-size 64mb 			//首次重写触发值，合并雷同命令
auto-aof-rewrite-percentage100			//再次重写，增长百分比
合并后假设50mb，增长100%，即100mb时触发再次合并。

在其他机器上使用AOF文件恢复数据，跟实验rbd相似。数据较多的时候需要等待一下

aof文件异常损坏，不是一定能修复好
[root@redis53 6379]# redis-check-aof --fix appendonly.aof 
0x 83：Expected \r\n,got:6166
AOF analyzed:size=160,ok up to=123,diff=37 This will shrink the AOF from 160 bytes,with 37 bytes,to 123 bytes 
Continue?[y/N]:y 
Successfully truncated AOF
daydayup9527
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
一文了解Redis高可用四种模式----持久化、主从复制、哨兵模式与集群搭建
夏颜的博客
07-02 829
Redis高可用有四种实现方法：持久化、主从复制、哨兵模式、集群模式 2. 持久化适用于单台服务器，主要作用是数据备份，即将数据存储在硬盘,保证数据不会因进程退出而丢失。其是最简单的一种高可用方式 3. 主从复制适用于数据的多机备份，以及对于读操作的负载均衡和简单的故障恢复。 4. 哨兵模式基于主从复制，部署哨兵模式必须先部署主从复制，其在主从复制基础上提供了自动化的故障恢复。但是其写操作无法负载均衡，存储能力受到单机的限制。 5. Redis集群提供了分布式存储方案解决了写操作无法负载均衡，以及存储能力受
cisco 2811路由器详细配置
weixin_33936401的博客
01-10 2701
cisco 2811路由器详细配置Router>enableRouter#configure terminalRouter(config)#hostname cisco2811          //定义路由器名称2811(config)#enable password 124563831    //设置登陆密码2811(config)#line vty 0 42811(config-lin...
静态路由综合实验
m0_64449718的博客
12-11 3294
1.除R5的环回地址固定以外，整个其他所有网段基于192.168.1.0/24进行合理的IP地址划分 （1）数广播域-----------骨干链路6个，环回网段8个-----------14个广播域 从主机位借位-------1位划分2个，2位4个，3位8个，4位16个------呈2的n次方递进 （2） 每条骨干链路分配2个IP----------6条 /30的网段-------至少要1条/27的掩码-----可划分出8条 环回网段-------4条I......
Linux之搭建自己的根文件系统
12-31 204
　　Hi！大家好，我是CrazyCatJack。又和大家见面了。今天给大家带来的是构建Linux下的根文件系统。希望大家看过之后都能构建出符合自己需求的根文件系统^_^ 1.内容概述 1.构造过程 　　今天给大家展示的根文件系统构造过程如下图所示： 　　正如大家看到的，这是一个环环相扣的过程。因为在这四个方面的内容其实相互包含，有很多交集的地方，所以我用环图给大家展示。在第一...
php 白名单,php实现ip白名单黑名单功能
weixin_34117129的博客
03-10 754
本文给大家分享了2个php用于实现黑白名单的实用函数，分别是安全IP检测函数和获取客户端IP函数，注释里解释的非常清楚，这里我就不多废话了。这个是一个检测ip是否非法的php函数，适应于白名单，黑名单功能开发，主要场景应用于：api来源限制，访问限制等.代码如下:/*** 安全IP检测，支持IP段检测* @param string $ip 要检测的IP* @param string|array $...
Redis主从复制、持久化、哨兵
01-07
（一）Redis集群的主从复制 概念 主从备份，防止主机宕机 ...redis 是一个支持持久化的内存数据库，也就是说 redis 需要经常将内存中的数据同步到磁盘来保证持久化.redis 支持两种持久化方式，一种是 Snapsho
redis主从复制原理的深入讲解
12-16
Redis持久化保证了即使redis服务重启也不会丢失数据，因为redis服务重启后会将硬盘上持久化的数据恢复到内存中，但是当redis服务器的硬盘损坏了可能会导致数据丢失，如果通过redis的主从复制机制就可以避免这种单点...
Redis主从复制以及主从复制技术原理.docx
10-14
1. 数据冗余：主从复制实现了数据的热备份，是持久化之外的一种数据冗余方式。 2. 故障恢复：当主节点出现问题时，可以由从节点提供服务，实现快速的故障恢复；实际上是一种服务的冗余。 3. 负载均衡：在主从复制的...
Redis 主从复制1
最新发布
08-03
1. 如果Slave重启，Redis会持久化`runID`和`offset`信息，重启后直接恢复，并尝试进行增量同步。如果Master的`backlog buffer`中还包含 Slave 的`offset`，则可以增量同步；否则，进行全量同步。 2. Slave节点不会...
redis常用命令，redis配置文件，redis持久化，redis事务，redis主从复制，jedis的使用
01-21
下面是对 Redis 的常用命令、配置文件、持久化、事务、主从复制、Jedis 使用的详细讲解。 Redis 常用命令 Redis 提供了很多有用的命令来管理和操作数据。下面是一些常用的 Redis 命令： * SET key value：设置...
dell EqualLogic测试过程
congsikuai0611的博客
01-13 580
2009年第一篇。测试设备信息：dell 2900dell EqualLogic PS5000 系列ip地址配置信息：dell 2900eth0: 192.168.1.1 eth1: 192.168.1.2Equ...
linux telnet 25端口,telnet 不到25端口
weixin_39608559的博客
04-30 925
telnet不到25端口(2012-04-08 05:59:08)标签：杂谈telnet 不到25端口问题 telnet 不到25端口telnet 192.168.1.13 25Trying 192.168.1.13...telnet: connect to address 192.168.1.13: Connection refusedtelnet: Unable to connect to ...
关于云服务及网络的几个基础概念
m0_57713282的博客
06-23 895
一：虚拟私有云VPC(virtual private cloud)：虚拟私有云由一个私网网段，路由表，至少一个子网构成，可以在VPC上定义安全组，VPN，IP地址段等，创建了一个虚拟私有云相当于创建了一个独立的网络环境，类似局域网 二：私网网段：用户在创建私有云时，指明的vpc使用的私网网段 三：子网：云资源（云服务器，云数据库等）必须部署在子网内，创建虚拟私有云时需要为私有云划分子网，子网网段必须在私网网段内 子网相当于局域网，多个网卡可以形成一个局域网，配置网卡的ip地址为同一个网段即可。如主机a的网卡
服务器显示dns掉线,局域网用户上网老掉线是否与局域网内的DNS服务器有关？我的局域网配置对吗？...
weixin_33497800的博客
08-10 416
环境如下:我校机房局域网内有一个WINDOWS2003的域服务器，它安装了DNS服务，其网卡IP为192.168.0.254 网关为192.168.0.1，它主要为一个机房内的电脑提供域用户登录。机房内共有60台学生用电脑，系统均为XP，它们的IP地址为192.168.0.2-192.168.0.61，网关为192.168.0.1，首选DNS为192.168.0.254，备用DNS为202.103...
MySQL 访问权限 系统 说明
java天气
12-01 492
The primaryfunction of the MySQL privilege system is to authenticate a user who connectsfrom a given host and to associate that user with privileges on a database suchas SELECT, INSERT, UPDATE, and ...
redis主从配置之持久化配置
cm777的博客
12-30 1200
文章看起来有点长，但没什么废话，几乎全是图 环境描述： centos：7.6 docker：19.03.1 redis：6.0.9 对于centos怎么装docker，docker又怎么装redis镜像等等内容就不做概述了。如果还不会这个，就先去百度把这些前置技能学习下 本文并没有配置哨兵模式，且全部是在一台服务器上完成的。 以下是正文 先贴一个redis官方的配置文件，使用下面的命令可以直接获取 wget http://download.redis.io/redis-stable/r
Redis的集群与主从复制（附Redis持久化）
shaonianbz的博客
05-05 4439
Redis持久化 1、Rdb方式 Redis默认的方式，redis通过快照来将数据持久化到磁盘中。 （1）设置持久化快照的条件：在redis.conf中修改持久化快照的条件，如下： 图表示的意思：900秒内操作1次或者300秒内操作10次或者60秒内操作10000次，将数据写到磁盘 （2）持久化文件存储的目录：在redis.conf中可以指定持久化文件存储的目录 （3）Rd...
redis持久化功能及主从模式
倾城一笑stu
10-03 643
一、持久化功能 redis为了内部数据的安全考虑，会把本身的数据保存到硬盘中一份，在服务器重启之后会自动把硬盘的数据恢复到内存(redis)的里边。数据保存到硬盘的过程就称为“持久化”效果。 1.snap shotting快照持久化 （1）该持久化默认开启，一次性把redis中全部的数据保存一份存储在硬盘中，如果数据非常多(10-20G)就不适合频繁持久化操作。 （2）该持久化的备份文件默

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值