1、虚拟机环境
使用的Linux环境已经版本:
Centos 7 64位系统
主机ip:
192.168.56.180
192.168.56.181
192.168.56.182
每台服务器是1主1从,实验3台服务器课成为3主3从。
Redis安装的项目目录、日志、配置文件等都存放在/root/svr/目录下。
2、下载相关的安装包以及解压
首先在192.168.56.180机器操作:
1 2 3 | cd /root/svr wget http: //download.redis.io/releases/redis-3.2.9.tar.gz tar -zxvf redis-3.2.9.tar.gz |
3、安装
在/root/svr/redis-3.2.9/目录下执行:
1 | make install PREFIX=/root/svr/redis-3.2.9 |
4、配置信息
创建集群配置、log日志、数据所在的文件夹:
1 2 | cd /root/svr/redis-3.2.9/ mkdir cluster-conf |
创建集群端口文件夹:
1 2 3 | cd cluster-conf mkdir 7777 mkdir 8888 |
复制配置文件到/root/svr/redis-3.2.9/cluster-conf/7777目录下:
1 | cp /root/svr/redis-3.2.9/redis.conf /root/svr/redis-3.2.9/cluster-conf/7777 |
修改7777目录下redis.conf配置文件:
(注意:找到相应的信息修改,或者把修改的信息全部注释掉,重新添加下面信息到头部,有利于以后修改和查看)
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 | #注释掉ip或者设置0.0.0.0都是局域网访问 #bind 127.0.0.1 #端口号 port 7777 #指定了记录日志的文件 logfile "/root/svr/redis-3.2.9/cluster-conf/7777/redis.log" #该目录要事先创建好,数据目录,数据库的写入会在这个目录。rdb、aof文件也会写在这个目录 dir /root/svr/redis-3.2.9/cluster-conf/7777/ #是否开启集群 cluster-enabled yes #集群配置文件的名称,每个节点都有一个集群相关的配置文件,持久化保存集群的信息, #这个文件并不需要手动配置,这个配置文件有Redis生成并更新, #每个Redis集群节点需要一个单独的配置文件,请确保与实例运行的系统中配置文件名称不冲突。 cluster-config-file nodes.conf #节点互连超时的阀值。集群节点超时毫秒数 cluster-node-timeout 5000 #默认redis使用的是rdb方式持久化,这种方式在许多应用中已经足够用了, #但是redis如果中途宕机,会导致可能有几分钟的数据丢失, #根据save来策略进行持久化,Append Only File是另一种持久化方式,可以提供更好的持久化特性, #Redis会把每次写入的数据在接收后都写入 appendonly.aof 文件, #每次启动时Redis都会先把这个文件的数据读入内存里,先忽略RDB文件。 appendonly yes |
复制7777目录下redis.conf至8888并修改端口及存储路径:
1 | cp /root/svr/redis-3.2.9/cluster-conf/7777/redis.conf /root/svr/redis-3.2.9/cluster-conf/8888 |
5、使用scp复制安装和配置好的redis复制到其他服务器上
已经在192.168.56.180机器配置好,复制到181和182机器
在两台新机器上创建文件夹
复制:
1 2 | scp -r /root/svr/redis-3.2.9 root@192.168.56.181:/root/svr/ #输入181机器密码即可传输数据。 |
1 2 | scp -r /root/svr/redis-3.2.9 root@192.168.56.182:/root/svr/ #输入182机器密码即可传输数据。 |
6、启动3台机器的redis
3台机器执行启动方式:
1 2 | /root/svr/redis-3.2.9/bin/redis-server /root/svr/redis-3.2.9/cluster-conf/7777/redis.conf & /root/svr/redis-3.2.9/bin/redis-server /root/svr/redis-3.2.9/cluster-conf/8888/redis.conf & |
查看状态是否:
![](https://i-blog.csdnimg.cn/blog_migrate/9095751f31b5f4f3939d55e74df557a8.png)
7、创建集群
1 | /root/svr/redis-3.2.9/src/redis-trib.rb create --replicas 1 192.168.56.180:7777 192.168.56.180:8888 192.168.56.181:7777 192.168.56.181:8888 192.168.56.182:7777 192.168.56.182:8888 |
无法创建,提示错误信息:
![](https://i-blog.csdnimg.cn/blog_migrate/521f919eb0ac699a629ca3ab7086fb76.png)
提示错误,是没有安装ruby这个插件,因为redis
集群创建的程序文件redis-trib,rb是由ruby来编写的,需要安装:
安装ruby完毕接着执行上面的创建集群命令
![](https://i-blog.csdnimg.cn/blog_migrate/0a2cebdb1f4f119595492534e1502b27.png)
报错。这时候需要安装一些和ruby与reids相关程序包和类库
1 2 | yum install rubygems gem install reids |
![](https://i-blog.csdnimg.cn/blog_migrate/45cccd679d2d9124b23a49618915b976.png)
报错,提示ruby版本需要大于2.2.2版本。CentOS7 yum库中ruby的版本支持到 2.0.0,可gem 安装redis需要最低是2.2.2
![](https://i-blog.csdnimg.cn/blog_migrate/f35d764b5ad1400c8e1e2b2c812e05d7.png)
需要安装个高版本的ruby
1 2 3 4 5 6 | #安装curl yum install curl #安装rvm #gpg2 --keyserver hkp://keys.gnupg.net --recv-keys D39DC0E3 #curl -L get.rvm.io | bash -s stable #source /usr/local/rvm/scripts/rvm |
![](https://i-blog.csdnimg.cn/blog_migrate/0aa8646eb3a6dd4717fb913e16dbf3c5.png)
查看rvm库中已知的ruby版本
![](https://i-blog.csdnimg.cn/blog_migrate/de9c12c9ce306f7e7ac7b1b835c293c1.png)
安装一个ruby版本
![](https://i-blog.csdnimg.cn/blog_migrate/b3196d0306021db9c3ab5cf5252c82ea.png)
使用一个ruby版本
卸载一个已知版本
查看现在版本
![](https://i-blog.csdnimg.cn/blog_migrate/cdcd41fb9e4401518e9d7ef409142696.png)
在重新安装ruby相关的redis就可以了
![](https://i-blog.csdnimg.cn/blog_migrate/7624c18d76bd586866446e667ff5a0b2.png)
更新ruby版本、移除旧版本、重新安装reids完毕。接着执行上面的创建集群命令。
还是出现错误:提示连接不上节点:
![](https://i-blog.csdnimg.cn/blog_migrate/a276251e4c83c76bad93d0048e788fcc.png)
这时候需要排查一下错误:
第一:服务器是否关闭防火墙
1 2 | systemctl status firewalld.service #查看防火墙 systemctl stop firewlld.service #关闭防火墙 |
![](https://i-blog.csdnimg.cn/blog_migrate/db24f17765985546ae532e77c983c97f.png)
(我这边已经关闭)
第二:是否所有的节点都启动
![](https://i-blog.csdnimg.cn/blog_migrate/e4c7c16dd31640b99608843bfe1f40dc.png)
(我这边都已经启动并且正常运行)
第三:服务器之间是否ping通
ping 192.168.56.180
ping 192.168.56.181
ping 192.168.56.182
(我这边都能正常ping通过)
第四:是否可以telnet ip port 连接上
1 2 | yum install telnet telbet 192.168.56.180 7777 |
出现错误:提示redis是受保护的,需要身份验证才可以进行:
![](https://i-blog.csdnimg.cn/blog_migrate/de619922931bea67f12de576a3f397d5.png)
这个问题解决可以有两种方法解决:
(1)修改配置文件redis.conf的权限参数设置为no,就是不需要权限验证
![](https://i-blog.csdnimg.cn/blog_migrate/82827b3c5741126290ec5e753a1df62d.png)
(2)修改配置文件redis.conf的权限设置安全密码(密码自定义设置)
1 | requirepass “111111” #权限密码 |
![](https://i-blog.csdnimg.cn/blog_migrate/1d94b92a7601a90d58be16159d091572.png)
我这里是第一解决方法,不需要权限,先kill启动的6个redis进程,在修改配置文件。在启动reidis服务。
接着执行上面的创建集群命令。
创建集群启动成功。
![](https://i-blog.csdnimg.cn/blog_migrate/50edff09e468e3ea2192765d3de62a44.png)
8、测试redis集群
1 2 | #登录客户端 ./redis-cli -c -p 7777(或者8888) #-c 参数:表示使用集群模式连接 |
在192.168.56.181:7777服务set值
![](https://i-blog.csdnimg.cn/blog_migrate/1e18f3dd33cd356ac41b8f9622103022.png)
在192.168.56.182:8888服务上get
![](https://i-blog.csdnimg.cn/blog_migrate/aea5cf5e08d9630ad90b638eb54dc2a5.png)
9、数据解析
完整搭建起来,管理的集群以及主从关联都在nodes.conf文件中生成的,我这边集群节点的生成配置文件数据显示
1 2 3 4 5 6 7 8 9 10 | 主/从 节点id ip prot slot槽范围 槽数量 m/s 主从等比例 附近信息(如果是主节点记录为复制功能,如果是从节点,关联相应的主节点id) M: 3f0d98eebfa18364a95ce7a578865ba7a3ef4493 192.168.56.180:7777 slots:0-5460 (5461 slots) master 1 additional replica(s) S: 54a525c670ad92a45dccfa92164c0a5f220a10bc 192.168.56.180:8888 slots: (0 slots) slave replicates 078973835bb8a36aeef272c2e243a9d9d733ea96 M: 078973835bb8a36aeef272c2e243a9d9d733ea96 192.168.56.181:7777 slots:5461-10922 (5462 slots) master 1 additional replica(s) S: 4e13f9dca80c63079e536b17eaa81cef8fcba624 192.168.56.182:8888 slots: (0 slots) slave replicates 3c0fa46c14e6d25c7e7b01079162baec86bd88e9 M: 3c0fa46c14e6d25c7e7b01079162baec86bd88e9 192.168.56.182:7777 slots:10923-16383 (5461 slots) master 1 additional replica(s) S: d507f34a7dab6dc512a82427e3731967f5a69101 192.168.56.181:8888 slots: (0 slots) slave replicates 3f0d98eebfa18364a95ce7a578865ba7a3ef4493 |
当节点挂了,nodes.conf会记录新的数据
![](https://i-blog.csdnimg.cn/blog_migrate/94f22799399f13c2fb7a1f696b7ad245.png)
当主节点挂了,因为集群会一直在监听集群中的主从节点的状态。加入一个主节点挂了,集群监听机制检查到,会对主节点的槽(数据)进行迁移,按照投票机制将主节点关联的从节点进行选举出一个充当主节点,因为我这里一个主节点关联一个从节点,所以只能是那个充当。
10、扩展知识
(1)持久层的配置和原理:rdb和aof
(2)哨兵、数据字段迁移、键空间迁移、在线迁移、redis-trib.rb的详解
(3)集群节点添加,删除
(4)Jedis客户端对集群的数据操作:set、list、key/value、hash等
(5)将key值执行CRC16算法对18384个槽进行取模
(6)压测.........