redis集群模式部署及维护
一、系统资源及组件规划
服务器 | 端口 | 服务 |
---|---|---|
10.0.3.173 | 7001 | redis |
7002 | redis | |
10.0.3.174 | 7001 | redis |
7002 | redis | |
10.0.3.178 | 7001 | redis |
7002 | redis | |
10.0.3.179(扩容) | 7001 | redis |
7002 | redis |
二、系统软件安装与设置
- 安装基础软件
yum -y install gcc
- 关闭防火墙
systemctl stop firewalld
systemctl disable firewalld
三、搭建redis-cluster集群
-
1.安装单机redis
下载redis软件包
wget http://download.redis.io/releases/redis-6.2.0.tar.gz
解压至指定目录
tar -zxvf redis-6.2.0.tar.gz -C /usr/local/
进入目录,编译安装
cd /usr/local/redis-6.2.0/
make MALLOC=libc && make install PREFIX=/usr/local/redis-6.2.0
创建目录
mkdir -p /usr/local/redis-6.2.0/cluster
make MALLOC=libc && make install PREFIX=/usr/local/redis-6.2.0
mkdir -p /usr/local/redis-6.2.0/cluster/redis_7001
mkdir -p /usr/local/redis-6.2.0/cluster/redis_7002
拷贝原配置文件,并加以修改
cp /usr/local/redis-6.2.0/redis.conf /usr/local/redis-6.2.0/cluster/redis_7001.conf
cp /usr/local/redis-6.2.0/redis.conf /usr/local/redis-6.2.0/cluster/redis_7002.conf
修改配置
启动六台redis服务
/usr/local/redis-6.2.0/bin/redis-server /usr/local/redis-6.2.0/cluster/redis_7001.conf
/usr/local/redis-6.2.0/bin/redis-server /usr/local/redis-6.2.0/cluster/redis_7002.conf
-
2.redis配置系统服务
创建服务
vim /lib/systemd/system/redis-7001.service
vim /lib/systemd/system/redis-7002.service
[Unit] Description=Redis After=network.target [Service] Type=forking PIDFile=/var/run/redis_7001.pid ExecStart=/usr/local/redis-6.2.0/bin/redis-server /usr/local/redis-6.2.0/cluster/redis_7001.conf ExecReload=/bin/kill -s HUP $MAINPID ExecStop=/bin/kill -s QUIT $MAINPID PrivateTmp=true [Install] WantedBy=multi-user.target Alias=redis-7001.service
重新加载配置
systemctl daemon-reload
启动、重启、停止、开机自启
systemctl start redis-7001
systemctl restart redis-7001
systemctl stop redis-7001
systemctl enable redis-7001
-
3.创建redis-cluster集群
创建集群
/usr/local/redis-6.2.0/bin/redis-cli -a 123456 --cluster create 10.0.3.173:7001 10.0.3.173:7002 10.0.3.174:7001 10.0.3.174:7002 10.0.3.178:7001 10.0.3.178:7002 --cluster-replicas 1
进入redis客户端
/usr/local/redis-6.2.0/bin/redis-cli -a 123456 -h 10.0.3.173 -p 7001
查看节点之间的主从关系
cluster nodes
查看集群相关信息
cluster info
四、redis-cluster集群故障模拟
关闭从redis服务
手动停止10.0.3.178服务器上7002端口对应的 从redis服务。
kill -9 pid
查看集群信息
cluster nodes
再次启动刚刚关闭的redis服务
/usr/local/redis-6.2.0/bin/redis-server /usr/local/redis-6.2.0/cluster/redis_7002.conf
查看集群信息,集群服务恢复正常
cluster nodes
关闭主redis服务
手动停止10.0.3.178服务器上7001端口对应的 主redis服务。
kill -9 pid
此时查看集群信息,178服务器上之前的主节点挂掉,它的从节点接替其成为主节点。
cluster nodes
重启挂掉的redis服务
/usr/local/redis-6.2.0/bin/redis-server /usr/local/redis-6.2.0/cluster/redis_7001.conf
查看集群信息
刚刚挂掉的主节点并未恢复成主节点,而是成为从节点
移除单个redis服务
上面模拟的是某个redis挂掉之后可以恢复该redis的情况
假如某个redis节点挂掉之后,无法恢复正常。
移除该节点
连入五个正常的redis节点客户端,以下命令输入五次(应该有更好的方法)
/usr/local/redis-6.2.0/bin/redis-cli -a 123456 -h 10.0.3.173 -p 7001
cluster forget 77843369c5e78f7b6071e380034319aaf27212a4
此时集群中已经不存在那个节点
cluster nodes
接着我们准备一个正常的redis节点服务,步骤同上面redis单机安装。
将这个正常的redis节点服务加入集群
/usr/local/redis-6.2.0/bin/redis-cli -a 123456 -h 10.0.3.173 -p 7001 --cluster add-node 10.0.3.179:7001 10.0.3.174:7001 --cluster-slave --cluster-master-id 254084fa87d155e76ea75160354f53cff5d5e1d8
此时查看集群信息
节点添加成功
/usr/local/redis-6.2.0/bin/redis-cli -a 123456 -h 10.0.3.178 -p 7001
cluster nodes
五、redis-cluster集群扩容缩容
redis集群扩容
当前集群信息,总共六个redis节点
现在将10.0.3.179服务器上的两个redis服务添加进集群。
增加master节点
/usr/local/redis-6.2.0/bin/redis-cli -a 123456 -h 10.0.3.173 -p 7001 --cluster add-node 10.0.3.179:7001 10.0.3.173:7001
查看此时集群信息
/usr/local/redis-6.2.0/bin/redis-cli -a 123456 -h 10.0.3.173 -p 7001
cluster nodes
添加salve节点
/usr/local/redis-6.2.0/bin/redis-cli -a 123456 -h 10.0.3.173 -p 7001 --cluster add-node 10.0.3.179:7002 10.0.3.173:7001 --cluster-slave --cluster-master-id 62827807a3284542b8e6296bd5dcdb9e974e93bf
此时查看集群
/usr/local/redis-6.2.0/bin/redis-cli -a 123456 -h 10.0.3.173 -p 7001
cluster nodes
给新添加的master节点分配slots(槽位)
/usr/local/redis-6.2.0/bin/redis-cli -a 123456 -h 10.0.3.173 -p 7001 --cluster reshard 10.0.3.173:7001
此时新添加的master节点已经有了槽位,扩容完成。
redis集群缩容
集群缩容就是先将master节点上的槽位分配给其他master节点,然后移除该master节点以及它的salve节点
将master节点上的slots分配给其他redis主节点
/usr/local/redis-6.2.0/bin/redis-cli -a 123456 -h 10.0.3.173 -p 7001 --cluster reshard --cluster-from 62827807a3284542b8e6296bd5dcdb9e974e93bf --cluster-to 0ce55d9f8b301e286df48ea130a5edb80e8bd18c --cluster-slots 1365 10.0.3.173:7001
/usr/local/redis-6.2.0/bin/redis-cli -a 123456 -h 10.0.3.173 -p 7001 --cluster reshard --cluster-from 62827807a3284542b8e6296bd5dcdb9e974e93bf --cluster-to 1e17966f82e8811b074479650a0eff8e25550ef8 --cluster-slots 1366 10.0.3.173:7001
/usr/local/redis-6.2.0/bin/redis-cli -a 123456 -h 10.0.3.173 -p 7001 --cluster reshard --cluster-from 62827807a3284542b8e6296bd5dcdb9e974e93bf --cluster-to 128ef338e9f3bf3de626d89f681a831fa1cd4720 --cluster-slots 1365 10.0.3.173:7001
–cluster-from:要删除的主节点id
–cluster-to:接收迁移槽的主节点id
–cluster-slots:迁移槽的数量
此时从集群中删除179服务器上的两个redis节点
/usr/local/redis-6.2.0/bin/redis-cli -a 123456 -h 10.0.3.173 -p 7001 --cluster del-node 10.0.3.173:7001 62827807a3284542b8e6296bd5dcdb9e974e93bf
/usr/local/redis-6.2.0/bin/redis-cli -a 123456 -h 10.0.3.173 -p 7001 --cluster del-node 10.0.3.173:7001 78c299b3db8e027686a2b1ac2bae190b5c20fb0b
此时再查看集群,缩容成功
/usr/local/redis-6.2.0/bin/redis-cli -a 123456 -h 10.0.3.173 -p 7001
cluster nodes