一、Redis主从复制
- 介绍:主机数据更新后根据配置和策略,自动同步到备机的master/slaver机制,Master以写为主,Slave以读为主
- 作用
- 读写分离,性能扩展
- 容灾快速恢复
二、步骤
- 拷贝多个redis.conf文件,include(写绝对路径)
- 开启daemonize yes
- pid 文件名字 pidfile
- 指定端口 port
- Log 文件明珠紫
- dump.rdb 名字 dbfilename
- Appendonly 关掉或者换名字
# redis6379.conf
include /myredis/redis.conf
pidfile /var/run/redis_6379.pid
port 6379
dbfilename dump6379.rdb
# redis6380.conf
include /myredis/redis.conf
pidfile /var/run/redis_6380.pid
port 6380
dbfilename dump6380.rdb
# redis6381.conf
include /myredis/redis.conf
pidfile /var/run/redis_6381.pid
port 6381
dbfilename dump6381.rdb
- slave-pority 10:设置从机的优先级,值越小,优先级越高,用于选举主机时使用。默认100
- 启动三台redis服务器(
在3个不同的远程连接会话中进行
)
redis-server redis6379.conf
redis-server redis6380.conf
redis-server redis6381.conf
- 查看系统进程,看看三台服务器是否启动
ps -ef | grep redis
- 查看三台主机运行情况(
在3个不同的远程连接会话中进行
)
info replication
- 配从不配主
slaveof <ip> <port>
:成为某个实例的从服务器
# 在6380上执行
slaveof 127.0.0.1 6379
# 在6381上执行
slaveof 127.0.0.1 6379
- 在主机上写,在从机上可以读取数据
- 主机挂掉,重启就行,一切如初
- 从机重启需重设:
slaveof 127.0.0.1 6379
,可以将配置增加到文件中。永久生效
三、主从传递
- 上一个Slave可以是下一个slave的master,slave同样可以接收其他slaves的链接和同步请求,那么该slave作为了链条中下一个的master,可以有效减轻master的写压力,去中心化降低风险
slaveof <ip> <port>
- 中途变更转向:会清除之前的数据,重新建立拷贝最新的
- 风险:一旦某个salve宕机,后面的slave都没法备份
- 主机挂了,从机还是从机,无法写数据了
四、从机变主机
- 当一个master宕机后,后面的slave可以立刻升为master,其后面的slave不用做任何修改
- 用
slaveof no one
将从机变为主机
五、复制原理
- Slave启动成功连接到master后悔发送一个sync命令
- Master接到命令启动后台的存盘过程,同时收集所有接收到的用于修改数据集命令,在后台进程执行完毕之后,master将传送整个数据文件到slave,以完成一次完全同步
- 全量复制:而slave服务在接收到数据库文件数据后,将其存盘并加载到内存中
- 增量复制:Master继续将新的所有收集到的修改命令依次传给slave,完成同步
- 但是只要是重新连接master,依次完全同步(全量复制),将被自动执行
一、哨兵模式(sentinel)
Redis从机变主机的自动版,能够后台监控主机是否故障,如果故障了根据投票数自动将从机转换为主机
二、配置步骤
- 设置一主二从模式,6379(主),6380(从),6381(从)
- 自定义的/myredis目录下新建sentinel.conf文件
- 配置哨兵
# mymaster为监控对象起的服务器名称
# 1为至少有多少个哨兵同意迁移的数量
sentinel monitor mymaster 127.0.0.1 6379 1
- 启动哨兵
# /myredis为redis的安装位置
/usr/local/bin/redis-sentinel /myredis/sentinel.conf
- 当主机挂掉,从机选举中产生新的主机
- 大概10秒左右可以看到哨兵窗口日志,切换了新的主机
- 根据优先级别:
slave-priority
选举主机 - 原主机重启后会变为从机
三、复制延时
由于所有的写操作都是先在Master上操作,然后同步更新得到Slave上,所以从Master同步到Slave机器有一定的延迟,当系统很繁忙的时候,延迟问题会更加严重,Slave机器数量的增加也会使这个问题更加严重
四、故障恢复
- 从下线的主服务的所有从服务里面挑选一个从服务,将其转换成主服务,选择条件依次为:
- 选择优先级别靠前的(优先级在redis.conf中默认:replication-priority 100,值越小优先级越高)
- 选择变异量最大的(偏移量是指获得原主机数据最全的)
- 选择runid最小的从服务(每个redis实例启动后都会随机生成一个40位的runid)
- 挑选出新的主服务之后sentinel向原主服务的从服务发送slaveof新主服务的命令,复制新master
- 当已下线的服务重新上线时,sentinel会向其发送slaveof命令,让其成为新主的从
五、Java实现
private static JedisSentinelPool jedisSentinelPool=null;
public static Jedis getJedisFromSentinel(){
if(jedisSentinelPool==null){
Set<String> sentinelSet=new HashSet<>();
sentinelSet.add("192.168.11.103:26379");
JedisPoolConfig jedisPoolConfig =new JedisPoolConfig();
jedisPoolConfig.setMaxTotal(10); //最大可用连接数
jedisPoolConfig.setMaxIdle(5); //最大闲置连接数
jedisPoolConfig.setMinIdle(5); //最小闲置连接数
jedisPoolConfig.setBlockWhenExhausted(true); //连接耗尽是否等待
jedisPoolConfig.setMaxWaitMillis(2000); //等待时间
jedisPoolConfig.setTestOnBorrow(true); //取连接的时候进行一下测试 ping pong
jedisSentinelPool=new JedisSentinelPool("mymaster",sentinelSet,jedisPoolConfig);
return jedisSentinelPool.getResource();
}else{
return jedisSentinelPool.getResource();
}