JavaEE进阶——Redis集群搭建与缓存实现

一、Redis简介

​ Redis是一个开源的使用ANSI C语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库，并提供多种语言的API。从2010年3月15日起，Redis的开发工作由VMware主持。从2013年5月开始，Redis的开发由Pivotal赞助。

​ Redis是一个key-value存储系统。和Memcached类似，它支持存储的value类型相对更多，包括string(字符串)、list(链表、set(集合)、zset(sorted set –有序集合)和hash（哈希类型）。这些数据类型都支持push/pop、add/remove及取交集并集和差集及更丰富的操作，而且这些操作都是原子性的。在此基础上，redis支持各种不同方式的排序。与memcached一样，为了保证效率，数据都是缓存在内存中。区别的是redis会周期性的把更新的数据写入磁盘或者把修改操作写入追加的记录文件，并且在此基础上实现了master-slave(主从)同步。

​ Redis支持主从同步。数据可以从主服务器向任意数量的从服务器上同步，从服务器可以是关联其他从服务器的主服务器。这使得Redis可执行单层树复制。存盘可以有意无意的对数据进行写操作。由于完全实现了发布/订阅机制，使得从数据库在任何地方同步树时，可订阅一个频道并接收主服务器完整的消息发布记录。同步对读取操作的可扩展性和数据冗余很有帮助。

二、Redis五种数据类型

• string 字符类型
• hash 散列类型
• list 列表类型
• set 集合类型
• zset(sorted set) 有序集合类型

三、Redis单机版安装

下载Redis

官网：https://redis.io/ redis-4.0.10.tar.gz

安装步骤

1. 安装gcc编译环境

   yum install gcc-c++

2. 把redis的源码上传到linux服务器

3. 解压缩

   tar -zxvf redis-4.0.10.tar.gz

4. 编译安装

   make
   make install PREFIX=/usr/local/redis

启动Redis

两种启动方式：前端启动、后台启动。

前端启动：./redis-server

后台启动：

• 复制redis.conf到redis的安装目录

  cp redis-4.0.10/redis.conf -c /usr/local/redis/bin/

• 修改redis.conf，修改daemonize yes
  

• ./redis-server redis.conf

查看启动结果：

ps aux|grep redis

关闭Redis

./redis-cli -a password -h 192.168.1.20 -p 6379 shutdown
ps aux|grep redis

四、客户端连接Redis

redis-cli

命令格式：redis-cli -p 端口 -h IP地址 <-c>连接集群时使用此参数

默认端口：6379

默认IP：localhost（127.0.0.1)

RedisDesktopManager

下载安装：https://redisdesktop.com/download

设置防火墙：

/sbin/iptables -I INPUT -p tcp --dport 6379 -j ACCEPT
/etc/rc.d/init.d/iptables save

修改redis.conf配置文件：注释掉本地链接限制和设置密码取消redis的默认保护模式

重启redis服务，客户端连接测试：

五、搭建Redis集群

redis-cluster架构图

架构细节

1. 所有的redis节点彼此互联(PING-PONG机制)，内部使用二进制协议优化传输速度和带宽.。
2. 节点的fail是通过集群中超过半数的节点检测失效时才生效。
3. 客户端与redis节点直连，不需要中间proxy层。客户端不需要连接集群所有节点，连接集群中任何一个可用节点即可。
4. redis-cluster把所有的物理节点映射到[0-16383]slot上，cluster 负责维护node<->slot<->value。Redis 集群中内置了 16384 个哈希槽，当需要在 Redis 集群中放置一个 key-value 时，redis 先对 key 使用 crc16 算法算出一个结果，然后把结果对 16384 求余数，这样每个 key 都会对应一个编号在 0-16383 之间的哈希槽，redis 会根据节点数量大致均等的将哈希槽映射到不同的节点。

搭建步骤

伪分布式集群配置：集群中应该至少有3个节点，每个节点有1个备份节点，需要6台服务器（6个Redis实例）。

1. 复制6份编译安装好的单机版Redis实例，分别为redis01-06；

   
   

2. 删除每个实例的dump.rdb文件，修改配置文件redis.conf的端口号7001-7006以及开放集群配置；

   
   

3. 拷贝Redis源码包src下用于搭建集群的ruby脚本：redis-trib.rb；

   cp /root/redis-4.0.10/src/redis-trib.rb -c ./

4. 安装ruby环境；

   
   # 下载Ruby源码包
   
   wget --no-check-certificate https://cache.ruby-lang.org/pub/ruby/2.3/ruby-2.3.0.tar.gz
   
   # 解压安装
   
   tar -zxvf ruby-2.3.0.tar.gz
   ./configure
   make
   make install
   
   # 查看Ruby版本
   
   ruby -v
   
   
   # 安装redis-trib.rb运行依赖的ruby的包
   
   gem install redis

5. 启动所有Redis实例；

   cd redis01/bin/
   ./redis-server redis.conf
   cd ../../
   cd redis02/bin/
   ./redis-server redis.conf
   cd ../../
   cd redis03/bin/
   ./redis-server redis.conf
   cd ../../
   cd redis04/bin/
   ./redis-server redis.conf
   cd ../../
   cd redis05/bin/
   ./redis-server redis.conf
   cd ../../
   cd redis06/bin/
   ./redis-server redis.conf
   cd ../../

   

6. 使用redis-trib.rb脚本创建Redis集群（防火墙开启7001-7006）。

   service iptables stop  # 临时关闭防火墙
   
   ./redis-trib.rb create --replicas 1 192.168.74.128:7001 192.168.74.128:7002 192.168.74.128:7003 192.168.74.128:7004 192.168.74.128:7005  192.168.74.128:7006

   如果出现Sorry, can’t connect to node，需要修改redis-trib.rb脚本，添加连接密码。

   

搭建结果

五、Jedis客户端

单机版测试

需要添加jedis依赖的jar包。

/**
  * 单机版测试
  */
@Test
public void