掌握Redis

一. 简介

在过去的几年中，NoSQL 数据库一度成为高并发、海量数据存储解决方案的代名词，与之相应的产
品也呈现出雨后春笋般的生机。然而在众多产品中能够脱颖而出的却屈指可数，如 Redis,MongoDB、
BerkeleyDB 和 CouchDB 等。由于每种产品所拥有的特征不同，因此它们的应用场景也存在着一定的差异，下面仅给出简单的说明：

1). BerkeleyDB 是一种极为流行的开源嵌入式数据库，在更多情况下可用于存储引擎，
比BerkeleyDB 在被 Oracle 收购之前曾作为 MySQL 的存储引擎，由此可以预见，
该产品拥有极好的并发伸缩性，支持事务及嵌套事务，海量数据存储等重要特征，
在用于存储实时数据方面具有极高的可用价值。然而需要指出的是，该产品的 Licence 
为 GPL，这就意味着它并不是在所有情况下都是免费使用的。
2). 对 MongoDB 的定义为 Oriented-Document 数据库服务器，和 BerkeleyDB 不同的是该数据
库可以像其他关系型数据库服务器那样独立的运行并提供相关的数据服务。从该产品的官方文档中我们可
以获悉，MongoDB 主要适用于高并发的论坛或博客网站，这些网站具有的主要特征是并发访问量高、多
读少写、数据量大、逻辑关系简单，以及文档数据作为主要数据源等。和 BerkeleyDB 一样，该产品的
License 同为 GPL。
3). Redis，典型的 NoSQL 数据库服务器，和 BerkeleyDB 相比，它可以作为服务程序独立运行于
自己的服务器主机。在很多时候，人们只是将 Redis 视为 Key/Value 数据库服务器，然而事实并非如此，
在目前的版本中，Redis 除了Key/Value 之外还支持 List、Hash、Set 和Ordered Set 等数据结构，因
此它的用途也更为宽泛。对于此种误解，Redis 官网也进行了相应的澄清。和以上两种产品不同的是，Redis
的 License 是 Apache License，就目前而言，它是完全免费。
4). memcached，数据缓存服务器。为什么在这里要给出该产品的解释呢？很简单，因为笔者认为
它在使用方式上和 Redis 最为相似。毕竟这是一篇关于 Redis 的技术系列博客，有鉴于此，我们将简要的
对比一下这两个产品。首先说一下它们之间的最大区别，memcached 只是提供了数据缓存服务，一旦服
务器宕机，之前在内存中缓存的数据也将全部消失，因此可以看出 memcached 没有提供任何形式的数据
持久化功能，而 Redis 则提供了这样的功能。再有就是 Redis 提供了更为丰富的数据存储结构，如 Hash
和 Set。至于它们的相同点，主要有两个，一是完全免费，再有就是它们的提供的命令形式极为接近。

二 特点

1、速度快
Redis是用C语言实现的,所有数据存储在计算机内存中。
2、持久化
Redis将内存中的数据定期保存到文件系统中。当Redis节点故障时，数据文件中可以从Redis数据文件恢复。
3、支持多种数据结构
支持多种数据结构：String、List、Set、Hash、 Sorted Set 、地理空间(geospatial) 等等。
4、支持多种编程语言API
支持Java、C、C++、Go、C#、 php、Python、Ruby、Lua、Node.js
5、功能丰富
管道（Pipelining）命令，支持事务、发布/订阅、LUA脚本等功能
6、主从复制
主服务器（master）执行添加、修改、删除，从服务器执行查询。
7、高可用及分布式
Redis-Sentinel（v2.8）支持高可用 ,Redis-Cluster（v3.0）支持分布式


	缺省情况下，Redis 会参照当前数据库中数据被修改的数量，在达到一定的阈值后会将数据库的快照
存储到磁盘上，这一点我们可以通过配置文件来设定该阈值。通常情况下，我们也可以将 Redis 设定为定
时保存。如当有 1000 个以上的键数据被修改时，Redis 将每隔 60 秒进行一次数据持久化操作。缺省设
置为，如果有 9 个或 9 个以下数据修改是，Redis 将每15 分钟持久化一次。
	从上面提到的方案中可以看出，如果采用该方式，Redis 的运行时效率将会是非常高效的，既每当有
新的数据修改发生时，仅仅是内存中的缓存数据发生改变，而这样的改变并不会被立即持久化到磁盘上，
从而在绝大多数的修改操作中避免了磁盘 IO 的发生。然而事情往往是存在其两面性的，在该方法中我们
确实得到了效率上的提升，但是却失去了数据可靠性。如果在内存快照被持久化到磁盘之前，Redis 所在
的服务器出现宕机，那么这些未写入到磁盘的已修改数据都将丢失。为了保证数据的高可靠性，Redis 还
提供了另外一种数据持久化机制--Append 模式。如果 Redis 服务器被配置为该方式，那么每当有数据修
改发生时，都会被立即持久化到磁盘。

三 数据类型

key 相关指令介绍

exits key 检测指定 key 是否存在，返回 1 表示存在，0 不存在
del key1 key2 ...... keyN 删除给定 key,返回删除 key 的数目，0 表示给定 key 都不存在
type key 返回给定 key 值的类型。返回 none 表示 key 不存在,string 字符类型，list 链表
类型 set 无序集合类型......
keys pattern 返回匹配指定模式的所有 key
randomkey 返回从当前数据库中随机选择的一个 key,如果当前数据库是空的，返回空串
rename oldkey newkey 重命名一个 key,如果 newkey 存在，将会被覆盖，返回 1 表示成功，
0 失败。可能是 oldkey 不存在或者和 newkey 相同。
renamenx oldkey newkey 同上，但是如果 newkey 存在返回失败。
expire key seconds 为 key 指定过期时间，单位是秒。返回 1 成功，0 表示 key 已经设置过过
期时间或者不存在。
ttl key 返回设置过过期时间key的剩余过期秒数。-1表示key不存在或者未设置过期时间。
select db-index 通过索引选择数据库，默认连接的数据库是 0,默认数据库数是 16 个。返回 1
表示成功，0 失败。
move key db-index 将 key 从当前数据库移动到指定数据库。返回 1 表示成功。0 表示 key
不存在或者已经在指定数据库中。

string类型

string 是最基本的类型，而且 string 类型是二进制安全的。意思是 redis 的 string 可以
包含任何数据。比如 jpg 图片或者序列化的对象。从内部实现来看其实 string 可以看作 byte数组，最大上限是 1G 字节。
string类型数据操作指令简介:

 set key value 设置 key 对应 string 类型的值，返回 1 表示成功，0 失败。
setnx key value 如果 key 不存在，设置 key 对应 string 类型的值。如果 key 已经存在，返
回 0。
get key 获取 key 对应的 string 值,如果 key 不存在返回 nil
getset key value 先获取 key 的值，再设置 key 的值。如果 key 不存在返回 nil。
mget key1 key2 ...... keyN 一次获取多个 key 的值，如果对应 key 不存在，则对应返回 nil。
mset key1 value1 ...... keyN valueN 一次设置多个 key 的值，成功返回 1 表示所有的值都设置
了，失败返回 0 表示没有任何值被设置。
msetnx key1 value1 ...... keyN valueN 一次设置多个 key 的值，但是不会覆盖已经存在的 key
incr key 对 key 的值做++操作，并返回新的值。注意 incr 一个不是 int 的 value 会返回错
误，incr 一个不存在的 key，则设置 key 值为 1。
decr key 对 key 的值做--操作，decr 一个不存在 key，则设置 key 值为-1。
incrby key integer 对 key 加上指定值 ，key 不存在时候会设置 key，并认为原来的 value
是 0。
decrby key integer 对 key 减去指定值。decrby 完全是为了可读性，我们完全可以通过 incrby
一个负值来实现同样效果，反之一样。

hash类型

hash 是一个 string 类型的 field 和 value 的映射表。添加，删除操作都是 O(1) （平均） 。hash 特别适合用于存储对象。相对于将对象的每个字段存成单个 string 类型。将一个对象存储在 hash 类型中会占用更少的内存，并且可以更方便的存取整个对象。省内存的原因是新建一个 hash 对象时开始是用 zipmap（又称为 small hash）来存储的。这个 zipmap 其实并不是 hash table，但是 zipmap 相比正常的 hash 实现可以节省不少 hash 本身需要的一些元数据存储开销。尽管 zipmap 的添加，删除，查找都是 O(n)，但是由于一般对象的 field数量都不太多。所以使用 zipmap 也是很快的,也就是说添加删除平均还是 O(1)。如果 field或者 value的大小超出一定限制后，redis会在内部自动将zipmap替换成正常的hash实现.这个限制可以在配置文件中指定。
hash-max-zipmap-entries 64 #配置字段最多 64 个
hash-max-zipmap-value 512 #配置 value 最大为 512 字节
hash 类型数据操作指令简介:

hset key field value 设置 hash field 为指定值，如果 key 不存在，则创建
hget key field 获取指定的 hash field。
hmget key filed1....fieldN 获取全部指定的 hash filed。
hmset key filed1 value1 ...... filedN valueN 同时设置 hash 的多个 field。
hincrby key field integer 将指定的 hash filed 加上指定值。成功返回 hash filed 变更后的
值。
hexists key field 检测指定 field 是否存在。
hdel key field 删除指定的 hash field。
hlen key 返回指定 hash 的 field 数量。
hkeys key 返回 hash 的所有 field。
hvals key 返回 hash 的所有 value。
hgetall 返回 hash 的所有 filed 和 value

list类型

list 是一个链表结构，可以理解为一个每个子元素都是 string 类型的双向链表。主要功能是 push、pop、获取一个范围的所有值等。操作中 key 理解为链表的名字。
list类型数据操作指令简介

lpush key string 在 key 对应 list 的头部添加字符串元素，返回 1 表示成功，0 表示 key 存
在且不是 list 类型。
rpush key string 在 key 对应 list 的尾部添加字符串元素。
llen key 返回 key 对应 list 的长度，如果 key 不存在返回 0，如果 key 对应类型不是 list
返回错误。
lrange key start end 返回指定区间内的元素，下标从 0 开始，负值表示从后面计算，-1 表示
倒数第一个元素 ，key 不存在返回空列表。
ltrim key start end 截取 list 指定区间内元素，成功返回 1，key 不存在返回错误。
lset key index value 设置 list 中指定下标的元素值，成功返回 1，key 或者下标不存在返回
错误。
lrem key count value从 List 的头部（count正数）或尾部（count负数）删除一定数量（count ）
匹配 value 的元素，返回删除的元素数量。count 为 0 时候删除全部。
lpop key 从 list 的头部删除并返回删除元素。如果 key 对应 list 不存在或者是空返回 nil ，
如果 key 对应值不是 list 返回错误。
rpop key 从 list 的尾部删除并返回删除元素。
blpop key1 ...... keyN timeout 从左到右扫描，返回对第一个非空 list 进行 lpop 操作并返回 ，
比如 blpop list1 list2 list3 0 ,如果 list 不存在 list2,list3 都是非空则对 list2 做
lpop 并返回从 list2 中删除的元素。如果所有的 list 都是空或不存在，则会阻塞 timeout
秒，timeout 为 0 表示一直阻塞。当阻塞时，如果有 client 对 key1...keyN 中的任意 key
进行 push 操作，则第一在这个 key 上被阻塞的 client 会立即返回。如果超时发生，则返回
nil。有点像 unix 的 select 或者 poll。
brpop 同 blpop，一个是从头部删除一个是从尾部删除

set类型

set 是无序集合，最大可以包含(2 的 32 次方-1)个元素。set 的是通过 hash table 实现的 ，所以添加，删除，查找的复杂度都是 O(1)。hash table 会随着添加或者删除自动的调整大小 。需要注意的是调整 hash table 大小时候需要同步（获取写锁）会阻塞其他读写操作。可能不久后就会改用跳表（skip list）来实现。跳表已经在 sorted sets 中使用了。关于 set 集合类型除了基本的添加删除操作，其它有用的操作还包含集合的取并集(union)，交集(intersection) ，差集(difference)。通过这些操作可以很容易的实现 SNS 中的好友推荐和 blog 的 tag 功能。
set类型数据操作指令简介

sadd key member 添加一个 string 元素到 key 对应 set 集合中，成功返回 1,如果元素以及
在集合中则返回 0，key 对应的 set 不存在则返回错误。
srem key member 从 key 对应 set 中移除指定元素，成功返回 1，如果 member 在集合中不
存在或者 key 不存在返回 0，如果 key 对应的不是 set 类型的值返回错误。
spop key 删除并返回 key 对应 set 中随机的一个元素,如果 set 是空或者 key 不存在返回
nil。
srandmember key 同 spop，随机取 set 中的一个元素，但是不删除元素。
smove srckey dstkey member 从srckey对应set中移除member并添加到dstkey对应set中 ，
整个操作是原子的。成功返回 1,如果 member 在 srckey 中不存在返回 0，如果 key 不是 set
类型返回错误。
scard key 返回 set 的元素个数，如果 set 是空或者 key 不存在返回 0。
sismember key member 判断 member 是否在 set 中，存在返回 1，0 表示不存在或者 key 不
存在。
sinter key1 key2 …… keyN 返回所有给定 key 的交集。
sinterstore dstkey key1 ....... keyN 返回所有给定 key 的交集，并保存交集存到 dstkey 下。
sunion key1 key2 ...... keyN 返回所有给定 key 的并集。
sunionstore dstkey key1 ...... keyN 返回所有给定 key 的并集，并保存并集到 dstkey 下。
sdiff key1 key2 ...... keyN 返回所有给定 key 的差集。
sdiffstore dstkey key1 ...... keyN 返回所有给定 key 的差集，并保存差集到 dstkey 下。
smembers key 返回 key 对应 set 的所有元素，结果是无序的。

sorted t set 类型

sorted set 是有序集合，它在 set 的基础上增加了一个顺序属性，这一属性在添加修改元素的时候可以指定，每次指定后，会自动重新按新的值调整顺序。可以理解了有两列的mysql 表，一列存 value，一列存顺序。操作中 key 理解为 sorted set 的名字。
Sorted Set 类型数据操作指令简介:

add key score member 添加元素到集合，元素在集合中存在则更新对应 score。
zrem key member 删除指定元素，1 表示成功，如果元素不存在返回 0。
zincrby key incr member 增加对应 member 的 score 值，然后移动元素并保持 skip list 保持有
序。返回更新后的 score 值。
zrank key member 返回指定元素在集合中的排名（下标），集合中元素是按 score 从小到大
排序的。
zrevrank key member 同上,但是集合中元素是按 score 从大到小排序。
zrange key start end 类似 lrange 操作从集合中去指定区间的元素。返回的是有序结果
zrevrange key start end 同上，返回结果是按 score 逆序的。
zrangebyscore key min max 返回集合中 score 在给定区间的元素。
zcount key min max 返回集合中 score 在给定区间的数量。
zcard key 返回集合中元素个数。
zscore key element 返回给定元素对应的 score。
zremrangebyrank key min max 删除集合中排名在给定区间的元素。
zremrangebyscore key min max 删除集合中 score 在给定区间的元素

python使用redis

依赖

>: pip3 install redis

直接使用

import redis
r = redis.Redis(host='127.0.0.1', port=6379)

连接池使用

import redis
pool = redis.ConnectionPool(host='127.0.0.1', port=6379)
r = redis.Redis(connection_pool=pool)

缓存使用：要额外安装 django-redis

1.将缓存存储位置配置到redis中：settings.py
CACHES = {
    "default": {
        "BACKEND": "django_redis.cache.RedisCache",
        "LOCATION": "redis://127.0.0.1:6379",
        "OPTIONS": {
            "CLIENT_CLASS": "django_redis.client.DefaultClient",
            "CONNECTION_POOL_KWARGS": {"max_connections": 100}
        }
    }
}

2.操作cache模块直接操作缓存：views.py
from django.core.cache import cache  # 结合配置文件实现插拔式
存放token，可以直接设置过期时间
cache.set('token', 'header.payload.signature', 10)
取出token
token = cache.get('token')