Redis它是一款内存高速缓存数据库。Redis全称为:Remote Dictionary Server(远程数据服务)该软件使用C语言编写,Redis是一个开源的,使用C语言编写的,支持网络交互的,可以基于内存也可以持久化的key-value数据库,它支持丰富的数据类型,如:string、list、set、zset(sorted set)、hash。
他的特点:
1.Redis以内存作为数据存储介质,所以读写数据的效率极高,远远超过数据库。以设置和获取一个256字节字符串为例,它的读取速度可高达110000次/s,写速度高达81000次/s。
2.储存在Redis中的数据是持久化的,断电或重启后,数据也不会丢失。因为Redis的存储分为内存存储、磁盘存储和log文件三部分,重启后,Redis可以从磁盘重新将数据加载到内存中,这些可以通过配置文件对其进行配置,正因为这样,Redis才能实现持久化。
3.Redis支持主从模式,可以配置集群,这样更利于支撑起大型的项目,这也是Redis的一大亮点。
使用Redis的好处:
1)速度快,因为存在内存中,存取都是 O(0)。
2)支持多种数据类型 string、hash、list、set、sortedset。
3)支持事务,操作都是原子性的,所谓的原子性就是对数据的更改要么全部执行,要么全部不执行。
4)丰富的特性:可用于缓存,消息,按key设置过期时间,过期后将会自动删除。
redis持久化 -------------RDB(Redis DataBase)和AOF(Append Only File 只能追加不能改写的文件)
RDB(),简而言之,就是在不同的时间点,将redis存储的数据生成快照并存储到磁盘等介质上;
AOF(每秒持久化一次到磁盘),则是换了一个角度来实现持久化,那就是将redis执行过的所有写指令记录下来,在下次redis重新启动时,只要把这些写指令从前到后再重复执行一遍,就可以实现数据恢复了。
其实RDB和AOF两种方式也可以同时使用,在这种情况下,如果redis重启的话,则会优先采用AOF方式来进行数据恢复,这是因为AOF方式的数据恢复完整度更高。
如果你没有数据持久化的需求,也完全可以关闭RDB和AOF方式,这样的话,redis将变成一个纯内存数据库,就像memcache一样。
对于我们应该选择RDB还是AOF,官方的建议是两个同时使用。这样可以提供更可靠的持久化方案。
1.Redis的安装
Redis是c语言开发的。
在虚拟机上安装redis需要c语言的编译环境。如果没有gcc需要在线安装。
执行命令:yum install gcc-c++
安装步骤:
第一步:redis的源码包上传到linux系统。
第二步:解压缩redis。
第三步:编译。进入redis源码目录。make
第四步:安装(一般软件安装到/usr目录下)。make install PREFIX=/usr/local/redis
PREFIX参数指定redis的安装目录。
2.redis启动
前端启动:在redis的安装目录下直接启动redis-server
[root@localhost bin]# ./redis-server
后台启动:
把/root/redis-3.0.0/redis.conf 复制到 /usr/local/redis/bin目录下
[root@localhost redis-3.0.0]# cp redis.conf /usr/local/redis/bin/
修改配置文件:
[root@localhost bin]# ./redis-server redis.conf
no改yes
查看redis进程:
[root@localhost bin]# ps aux|grep redis
root 5190 0.1 0.3 33936 1712 ? Ssl 18:23 0:00 ./redis-server *:6379
root 5196 0.0 0.1 4356 728 pts/0 S+ 18:24 0:00 grep redis
关闭进程,运行完就关闭
[root@localhost bin]# Kill 5190//关闭进程
3.Redis-cli连接redis服务
[root@localhost bin]# ./redis-cli
127.0.0.1:6379> //6379是这个服务使用的端口号,默认的单机服务端口是6379
默认连接localhost运行在6379端口的redis服务。
[root@localhost bin]# ./redis-cli -h 192.168.1.102 -p 6379
-h:连接的服务器的地址
-p:服务的端口号
关闭redis:[root@localhost bin]# ./redis-cli shutdown
4.Redis存储的五种数据类型,存放形式是(key,value)Value有五种类型:String,Hash,List,Set, SortedSet。
4.1、String
get:获取
set:设置
incr:加1
decr:减1
4.2、Hash key-fields-values
hset: hset key fields values存一个(key,(fields(键),values(值)))
hget:hget key fields values
4.3、List 有顺序,可以重复
lpush list1 a b c d //往左边存abcd,得到的是{d,c,b,a}
lrange list1 0 -1//遍历查看元素,下标从0开始,到-1代表取全部,注意0和-1间有个空格
lpop list1 //在左边取一个元素,取完就在list1消失。
同样将l更改为r就是往右边执行
4.4、Set 元素没有顺序,不可以重复
sadd set1 a b c c c d //存进a,d,c,d
smembers set1//查询遍历
srem set1 a//删除set1中的a元素
4.5、SortedSet(分数+元素) 有顺序,不能重复,带顺序的集合,运算代价很高,尽量不用
zadd zset1 2 a 5 b 1 c 6 d
结果:(integer) 4 //分数+元素,默认分数越低越先排,
zrange zset1 0 -1//查询遍历
zrem zset1 a//删除
zrange zset1 0 -1 //升序查询
zrevrange zset1 0 -1//降序排序
zrange zset1 0 -1 withscores //升序带分数的查询
zrevrange zset1 0 -1 withscores//降序带分数的查询
4.6 Key命令
1.设置key的过期时间。
expire key second:设置key的过期时间,second为s
ttl key:查看key的有效期//-1持久化,-2不存在,正数是在倒计时
persist key:清除key的过期时间。Key持久化。
例如:
192.168.25.153:6379> expire Hello 100//过期时间为100s,可以每次重置
(integer) 1
192.168.25.153:6379> ttl Hello//查过期时间(倒计时),-1持久化,-2不存在
(integer) 77
4.7持久化方案
Redis的所有数据都是保存到内存中的。持久化方案分成两种:
Rdb:快照形式,定期把内存中当前时刻的数据保存到磁盘。Redis默认支持的持久化方案,有可能会丢失数据。
15min 有一个key发生变化就保存到磁盘;
5min有10个key发生变化就保存到磁盘;
1min内有10000个key变化就保存到磁盘。
aof形式:append only file。把所有对redis数据库操作的命令,增删改操作的命令。保存到文件中。数据库恢复时把所有的命令执行一遍即可。
每1s写一次进磁盘。
5. redis集群
架构细节:
(1)所有的redis节点彼此互联(PING-PONG机制),内部使用二进制协议优化传输速度和带宽.
(2)节点的fail是通过集群中超过半数的节点检测失效时才生效.
(3)客户端与redis节点直连,不需要中间proxy层.客户端不需要连接集群所有节点,连接集群中任何一个可用节点即可
(4)redis-cluster把所有的物理节点映射到[0-16383]slot(槽)上,cluster 负责维护node<->slot<->value
Redis 集群中内置了 16384 个哈希槽,当需要在 Redis 集群中放置一个 key-value 时,redis 先对 key 使用 crc16 算法算出一个结果,然后把结果对 16384 求余数,这样每个 key 都会对应一个编号在 0-16383 之间的哈希槽,redis 会根据节点数量大致均等的将哈希槽映射到不同的节点
附:redis集群的搭建
- Redis集群的搭建
Redis集群中至少应该有三个节点。要保证集群的高可用,需要每个节点有一个备份机。
Redis集群至少需要6台服务器。
搭建伪分布式。可以使用一台虚拟机运行6个redis实例。需要修改redis的端口号7001-7006
- 集群搭建环境
1、使用ruby脚本搭建集群。需要ruby的运行环境。
安装ruby
yum install ruby
yum install rubygems
- 安装ruby脚本运行使用的包。
[root@localhost ~]# gem install redis-3.0.0.gem
Successfully installed redis-3.0.0
1 gem installed
Installing ri documentation for redis-3.0.0...
Installing RDoc documentation for redis-3.0.0...
[root@localhost ~]#
[root@localhost ~]# cd redis-3.0.0/src
[root@localhost src]# ll *.rb
-rwxrwxr-x. 1 root root 48141 Apr 1 2015 redis-trib.rb
- 搭建步骤
需要6台redis服务器。搭建伪分布式。
需要6个redis实例。
需要运行在不同的端口7001-7006
第一步:创建6个redis实例,每个实例运行在不同的端口。需要修改redis.conf配置文件。配置文件中还需要把cluster-enabled yes前的注释去掉。
第二步:启动每个redis实例。
第三步:使用ruby脚本搭建集群。
./redis-trib.rb create --replicas 1 192.168.1.102:7001 192.168.1.102:7002 192.168.1.102:7003 192.168.1.102:7004 192.168.1.102:7005 192.168.1.102:7006 |
创建关闭集群的脚本:
[root@localhost redis-cluster]# vim shutdow-all.sh
redis01/redis-cli -p 7001 shutdown
redis01/redis-cli -p 7002 shutdown
redis01/redis-cli -p 7003 shutdown
redis01/redis-cli -p 7004 shutdown
redis01/redis-cli -p 7005 shutdown
redis01/redis-cli -p 7006 shutdown
[root@localhost redis-cluster]# chmod u+x shutdow-all.sh
[root@localhost redis-cluster]# ./redis-trib.rb create --replicas 1 192.168.1.102:7001 192.168.1.102:7002 192.168.1.102:7003 192.168.1.102:7004 192.168.1.102:7005 192.168.1.102:7006 >>> Creating cluster Connecting to node 192.168.1.102:7001: OK Connecting to node 192.168.1.102:7002: OK Connecting to node 192.168.1.102:7003: OK Connecting to node 192.168.1.102:7004: OK Connecting to node 192.168.1.102:7005: OK Connecting to node 192.168.1.102:7006: OK >>> Performing hash slots allocation on 6 nodes... Using 3 masters: 192.168.1.102:7001 192.168.1.102:7002 192.168.1.102:7003 Adding replica 192.168.1.102:7004 to 192.168.1.102:7001 Adding replica 192.168.1.102:7005 to 192.168.1.102:7002 Adding replica 192.168.1.102:7006 to 192.168.1.102:7003 M: 2e48ae301e9c32b04a7d4d92e15e98e78de8c1f3 192.168.1.102:7001 slots:0-5460 (5461 slots) master M: 8cd93a9a943b4ef851af6a03edd699a6061ace01 192.168.1.102:7002 slots:5461-10922 (5462 slots) master M: 2935007902d83f20b1253d7f43dae32aab9744e6 192.168.1.102:7003 slots:10923-16383 (5461 slots) master S: 74f9d9706f848471583929fc8bbde3c8e99e211b 192.168.1.102:7004 replicates 2e48ae301e9c32b04a7d4d92e15e98e78de8c1f3 S: 42cc9e25ebb19dda92591364c1df4b3a518b795b 192.168.1.102:7005 replicates 8cd93a9a943b4ef851af6a03edd699a6061ace01 S: 8b1b11d509d29659c2831e7a9f6469c060dfcd39 192.168.1.102:7006 replicates 2935007902d83f20b1253d7f43dae32aab9744e6 Can I set the above configuration? (type 'yes' to accept): yes >>> Nodes configuration updated >>> Assign a different config epoch to each node >>> Sending CLUSTER MEET messages to join the cluster Waiting for the cluster to join..... >>> Performing Cluster Check (using node 192.168.1.102:7001) M: 2e48ae301e9c32b04a7d4d92e15e98e78de8c1f3 192.168.1.102:7001 slots:0-5460 (5461 slots) master M: 8cd93a9a943b4ef851af6a03edd699a6061ace01 192.168.1.102:7002 slots:5461-10922 (5462 slots) master M: 2935007902d83f20b1253d7f43dae32aab9744e6 192.168.1.102:7003 slots:10923-16383 (5461 slots) master M: 74f9d9706f848471583929fc8bbde3c8e99e211b 192.168.1.102:7004 slots: (0 slots) master replicates 2e48ae301e9c32b04a7d4d92e15e98e78de8c1f3 M: 42cc9e25ebb19dda92591364c1df4b3a518b795b 192.168.1.102:7005 slots: (0 slots) master replicates 8cd93a9a943b4ef851af6a03edd699a6061ace01 M: 8b1b11d509d29659c2831e7a9f6469c060dfcd39 192.168.1.102:7006 slots: (0 slots) master replicates 2935007902d83f20b1253d7f43dae32aab9744e6 [OK] All nodes agree about slots configuration. >>> Check for open slots... >>> Check slots coverage... [OK] All 16384 slots covered. [root@localhost redis-cluster]# |
- 集群的使用方法
Redis-cli连接集群。
[root@localhost redis-cluster]# redis01/redis-cli -p 7002 -c
-c:代表连接的是redis集群
- Jedis
需要把jedis依赖的jar包添加到工程中。Maven工程中需要把jedis的坐标添加到依赖。
推荐添加到服务层。E3-content-Service工程中。
- 连接单机版
第一步:创建一个Jedis对象。需要指定服务端的ip及端口。
第二步:使用Jedis对象操作数据库,每个redis命令对应一个方法。
第三步:打印结果。
第四步:关闭Jedis
@Test public void testJedis() throws Exception { // 第一步:创建一个Jedis对象。需要指定服务端的ip及端口。 Jedis jedis = new Jedis("192.168.1.102", 6379); // 第二步:使用Jedis对象操作数据库,每个redis命令对应一个方法。 String result = jedis.get("hello"); // 第三步:打印结果。 System.out.println(result); // 第四步:关闭Jedis jedis.close(); } |
- 连接单机版使用连接池
第一步:创建一个JedisPool对象。需要指定服务端的ip及端口。
第二步:从JedisPool中获得Jedis对象。
第三步:使用Jedis操作redis服务器。
第四步:操作完毕后关闭jedis对象,连接池回收资源。
第五步:关闭JedisPool对象。
@Test public void testJedisPool() throws Exception { // 第一步:创建一个JedisPool对象。需要指定服务端的ip及端口。 JedisPool jedisPool = new JedisPool("192.168.1.102", 6379); // 第二步:从JedisPool中获得Jedis对象。 Jedis jedis = jedisPool.getResource(); // 第三步:使用Jedis操作redis服务器。 jedis.set("jedis", "test"); String result = jedis.get("jedis"); System.out.println(result); // 第四步:操作完毕后关闭jedis对象,连接池回收资源。 jedis.close(); // 第五步:关闭JedisPool对象。 jedisPool.close(); } |
- 连接集群版
第一步:使用JedisCluster对象。需要一个Set<HostAndPort>参数。Redis节点的列表。
第二步:直接使用JedisCluster对象操作redis。在系统中单例存在。
第三步:打印结果
第四步:系统关闭前,关闭JedisCluster对象。
@Test public void testJedisCluster() throws Exception { // 第一步:使用JedisCluster对象。需要一个Set<HostAndPort>参数。Redis节点的列表。 Set<HostAndPort> nodes = new HashSet<>(); nodes.add(new HostAndPort("192.168.1.102", 7001)); nodes.add(new HostAndPort("192.168.1.102", 7002)); nodes.add(new HostAndPort("192.168.1.102", 7003)); nodes.add(new HostAndPort("192.168.1.102", 7004)); nodes.add(new HostAndPort("192.168.1.102", 7005)); nodes.add(new HostAndPort("192.168.1.102", 7006)); JedisCluster jedisCluster = new JedisCluster(nodes); // 第二步:直接使用JedisCluster对象操作redis。在系统中单例存在。 jedisCluster.set("hello", "100"); String result = jedisCluster.get("hello"); // 第三步:打印结果 System.out.println(result); // 第四步:系统关闭前,关闭JedisCluster对象。 jedisCluster.close(); } |