Centos7上部署redis-5.0.5集群与监控工具(redisLive)

序言

首先说明下redis支持事务,同时redis事务能够跟spring事务一起使用@Transactional来进行控制.(但是集群不支持事务否则会报错 :MULTI is currently not supported in cluster mode.)

其次redis事务不支持并发操作一个属性或者变量.

再次redis集群很好搭建~同时会搭建该redis的可视化监控.

另外redis集群可以手动设置主从,不需要程序帮你设置.

搭建流程

具体操作如下.搭建6个服务,形成3主3备的集群.

[root@cuiyaonan2000@163.com cuiyaonan]# wget http://download.redis.io/releases/redis-5.0.5.tar.gz

[root@cuiyaonan2000@163.com cuiyaonan]# mkdir redis

[root@cuiyaonan2000@163.com cuiyaonan]# mv redis-5.0.5.tar.gz ./redis

[root@cuiyaonan2000@163.com cuiyaonan]# cd redis

[root@cuiyaonan2000@163.com redis]# tar -zxvf redis-5.0.5.tar.gz

[root@cuiyaonan2000@163.com redis]# cd redis-5.0.5/

[root@cuiyaonan2000@163.com redis-5.0.5]# make

[root@cuiyaonan2000@163.com redis-5.0.5]# make install PREFIX=/usr/local/redis

[root@cuiyaonan2000@163.com redis-5.0.5]#  mkdir /home/cuiyaonan/redis/7001

[root@cuiyaonan2000@163.com redis-5.0.5]#  mkdir /home/cuiyaonan/redis/7002

[root@cuiyaonan2000@163.com redis-5.0.5]#  mkdir /home/cuiyaonan/redis/7003

[root@cuiyaonan2000@163.com redis-5.0.5]#  mkdir /home/cuiyaonan/redis/7004

[root@cuiyaonan2000@163.com redis-5.0.5]#  mkdir /home/cuiyaonan/redis/7005

[root@cuiyaonan2000@163.com redis-5.0.5]#  mkdir /home/cuiyaonan/redis/7006

[root@cuiyaonan2000@163.com redis-5.0.5]# cp redis.conf ../7001/ 

[root@cuiyaonan2000@163.com redis-5.0.5]# cp redis.conf ../7002/ 

[root@cuiyaonan2000@163.com redis-5.0.5]# cp redis.conf ../7003/ 

[root@cuiyaonan2000@163.com redis-5.0.5]# cp redis.conf ../7004/ 

[root@cuiyaonan2000@163.com redis-5.0.5]# cp redis.conf ../7005/ 

[root@cuiyaonan2000@163.com redis-5.0.5]# cp redis.conf ../7006/ 

针对每个实例初始化对应conf文件

daemonize    yes                                   //redis后台运行
pidfile  /home/cuiyaonan/redis/7001/7001.pid       //pidfile文件对应7001,7002,7003,7004
port  7001                                         //端口7000,7002,7003,7004
cluster-enabled  yes                               //开启集群  把注释#去掉
cluster-config-file  /home/cuiyaonan/redis/7001/nodes-7001.conf   //集群的配置  配置文件首次启动自动生成 7001,7001,7002
cluster-node-timeout  5000         //请求超时  设置5秒够了
appendonly  yes                    //aof日志开启  有需要就开启，它会每次写操作都记录一条日志
protected-mode no                  //此时外部网络可以直接访问
bind 192.168.2.64                  //表示监听ip,此处应该填写部署redis服务器的ip
loglevel notice                    //设置日志级别,具体看配置文件说明
logfile ""                         //日志文件路径



#RDB的备份设置
#Redis 服务器默认是通过 RDB 方式完成持久化的，对应 redis.conf 文件的配置项如下：

# RDB文件的名称
dbfilename dump.rdb
# 备份RDB和AOF文件存放路径
dir /usr/local/var/db/redis/

#AOF的备份设置
默认情况下 AOF 功能是关闭的，Redis 只会通过 RDB 完成数据持久化的。开启 AOF 功能需要 redis.conf 文件中将 appendonly 配置项修改为 yes，这样在开启 AOF 持久化功能的同时，将基于 RDB 的快照持久化置于低优先级。修改 redis.conf 如下：


# 此选项为AOF功能的开关，默认为no，通过yes来开启aof功能
appendonly yes
# 指定AOF文件名称
appendfilename appendonly.aof
# 备份RDB和AOF文件存放路径
dir /usr/local/var/db/redis/

修改完conf就可以启动redis实例了.只有实例启动后,才能在搭建集群(这个流程有点怪).当然你也可以写个脚本一起启动.(命令在/usr/local/bin里执行)

[root@cuiyaonan2000@163.com bin]# ./redis-server /home/cuiyaonan/redis/7001/redis.conf

[root@cuiyaonan2000@163.com bin]# ./redis-server /home/cuiyaonan/redis/7002/redis.conf

[root@cuiyaonan2000@163.com bin]# ./redis-server /home/cuiyaonan/redis/7003/redis.conf

[root@cuiyaonan2000@163.com bin]# ./redis-server /home/cuiyaonan/redis/7004/redis.conf

[root@cuiyaonan2000@163.com bin]# ./redis-server /home/cuiyaonan/redis/7005/redis.conf

[root@cuiyaonan2000@163.com bin]# ./redis-server /home/cuiyaonan/redis/7006/redis.conf

启动成功后开启集群(应该这里的127.0.0.1切换成部署redis的ip地址或者域名,否则springboot连接不上).--

[root@cuiyaonan2000@163.com bin]# redis-cli --cluster create 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005 127.0.0.1:7006 --cluster-replicas 1

1) create

表示创建一个redis集群。

2) --cluster-replicas 1

表示为集群中的每一个主节点指定一个从节点，即一比一的复制。\

运行过程中，会有个提示，输入yes回车即可。从屏幕输出，可以很容易地看出哪些是主（master）节点，哪些是从（slave）节点.

故此redis集群搭建完成.

如下的命令是查看集群的部署情况,能看到哪些是主机,哪些是备用主机

[root@localhost bin]# redis-cli --cluster info 127.0.0.1:7001

重启集群

通过命令ps aux|grep redis 我们可以看到所有的redis服务.

可以直接使用kill -9 id 来关闭其中的某一个redis服务.

后可以通过如下命令,直接重启该redis,启动后该redis会自动加入cluster集群中.

[root@cuiyaonan2000@163.com bin]# ./redis-server /home/cuiyaonan/redis/7003/redis.conf

重建集群

在停止各个redis服务的时候,同时要清空对应redis中的内容,否则就不能通过命令redis-cli create 重建集群

redis监控工具安装

网上关于redis监控的工具的优缺点如下所示.(这个工具很久没有更新了,安装的时候肯定会有很多版本冲突.建议还是使用命令来查看服务的情况,同时如果出了新的开源Redis监控,也请你告知我~~cuiyaonan2000@163.com)

工具	优点	缺点
redis-stat	基于redis的INFO命令，较使用MONITOR的监控工具对redis服务器性能影响较小	如果同时监控多个redis实例，不能单独显示每一个实例的数据信息，貌似是总和。
RedisLive	MONITOR 命令对于 Redis 实例的性能有较大影响	RedisLive 支持同时监控多个 Redis 实例

由于Redis-Live是用Python写的，所以先检测Python环境，要求必须是2.7以上。CentOS7默认就是2.7.5，所以省去这一步。但是还是要检查下是不是?看到如下的内容就满足了继续执行.

[root@localhost ~]# python
Python 2.7.5 (default, Oct 30 2018, 23:45:53) 
[GCC 4.8.5 20150623 (Red Hat 4.8.5-36)] on linux2
Type "help", "copyright", "credits" or "license" for more information.
>>> exit()

继续按如下操作执行

[root@cuiyaonan2000@163.com cuiyaonan]# yum -y install epel-release
 
#如果安装失败可以使用命令 yum remove  python2-pip 进行删除
#如上的pthon2-pip 基于centos7 请注意
[root@cuiyaonan2000@163.com cuiyaonan]# yum -y install python-pip

#如下的可以不执行的
[root@cuiyaonan2000@163.com cuiyaonan]# yum install python-typing

#最好不要升级否则会爆出版本不兼容
[root@cuiyaonan2000@163.com cuiyaonan]# pip install --upgrade pip

[root@cuiyaonan2000@163.com cuiyaonan]# pip install tornado  

[root@cuiyaonan2000@163.com cuiyaonan]# pip install redis   

[root@cuiyaonan2000@163.com cuiyaonan]# pip install python-dateutil

[root@cuiyaonan2000@163.com cuiyaonan]# git clone https://github.com/nkrode/RedisLive.git


[root@localhost src]# pwd
/home/cuiyaonan/RedisLive/src

[root@localhost src]# vi redis-live.conf

{
        "RedisServers":
        [
                {
                        "server": "192.168.2.64",
                        "port" : 7001
                },
                 {
                        "server": "192.168.2.64",
                        "port" : 7002
                },
                 {
                        "server": "192.168.2.64",
                        "port" : 7003
                },
                 {
                        "server": "192.168.2.64",
                        "port" : 7004
                },
                 {
                        "server": "192.168.2.64",
                        "port" : 7005
                },
                 {
                        "server": "192.168.2.64",
                        "port" : 7006
                }

        ],

        #存放redislive的数据库类型,这里我们选择redis
        "DataStoreType" : "redis",

        #用于存放redislive的网站上数据,
        "RedisStatsServer":
        {
                "server" : "192.168.2.64",
                "port" : 7001
        },

        #如若数据存放在redis中就不需要如下的
        "SqliteStatsStore" :
        {
                "path":  "to your sql lite file"
        }
}

启动监控服务，每60秒监控一次(注意redis版本不能太高,因为redislive已经很久没有更新了)

./redis-monitor.py --duration=60

再次开启一个终端，进入/root/RedisLive/src目录，启动web服务

./redis-live.py