自学记录--Redis数据库

Redis也是一款NoSql数据库，基于内存级别的存储，应用场景很多，但目前我的了解程度就是用在缓存上，以后有新的了解在补充。

Redis是一个开源（BSD许可），内存存储的数据结构服务器，可用作数据库，高速缓存和消息队列代理。它支持字符串、哈希表、列表、集合、有序集合，位图，hyperloglogs等数据类型。内置复制、Lua脚本、LRU收回、事务以及不同级别磁盘持久化功能，同时通过Redis Sentinel提供高可用，通过Redis Cluster提供自动分区。

一、简介

   1.1 Redis 特点

   Redis 与其他 key - value 缓存产品有以下三个特点：

• Redis支持数据的持久化，可以将内存中的数据保持在磁盘中，重启的时候可以再次加载进行使用。
• Redis不仅仅支持简单的key-value类型的数据，同时还提供list，set，zset，hash等数据结构的存储。
  
• Redis支持数据的备份，即master-slave模式的数据备份。

   1.2 Redis 优势

• 性能极高 – Redis能读的速度是110000次/s,写的速度是81000次/s 。
• 丰富的数据类型 – Redis支持二进制案例的 Strings, Lists, Hashes, Sets 及 Ordered Sets 数据类型操作。
  
• 原子 – Redis的所有操作都是原子性的，同时Redis还支持对几个操作全并后的原子性执行。
  
• 丰富的特性 – Redis还支持 publish/subscribe, 通知, key 过期等等特性。

   1.3 Redis与其他key-value存储有什么不同？

• Redis有着更为复杂的数据结构并且提供对他们的原子性操作，这是一个不同于其他数据库的进化路径。Redis的数据类型都是基于基本数据结构的同时对程序员透明，无需进行额外的抽象。
• Redis运行在内存中但是可以持久化到磁盘，所以在对不同数据集进行高速读写时需要权衡内存，应为数据量不能大于硬件内存。在内存数据库方面的另一个优点是， 相比在磁盘上相同的复杂的数据结构，在内存中操作起来非常简单，这样Redis可以做很多内部复杂性很强的事情。 同时，在磁盘格式方面他们是紧凑的以追加的方式产生的，因为他们并不需要进行随机访问。

 参数说明

redis.conf 配置项说明如下：
1. Redis默认不是以守护进程的方式运行，可以通过该配置项修改，使用yes启用守护进程
    daemonize no
2. 当Redis以守护进程方式运行时，Redis默认会把pid写入/var/run/redis.pid文件，可以通过pidfile指定
    pidfile /var/run/redis.pid
3. 指定Redis监听端口，默认端口为6379，作者在自己的一篇博文中解释了为什么选用6379作为默认端口，因为6379在手机按键上MERZ对应的号码，而MERZ取自意大利歌女Alessia Merz的名字
    port 6379
4. 绑定的主机地址
    bind 127.0.0.1
5.当 客户端闲置多长时间后关闭连接，如果指定为0，表示关闭该功能
    timeout 300
6. 指定日志记录级别，Redis总共支持四个级别：debug、verbose、notice、warning，默认为verbose
    loglevel verbose
7. 日志记录方式，默认为标准输出，如果配置Redis为守护进程方式运行，而这里又配置为日志记录方式为标准输出，则日志将会发送给/dev/null
    logfile stdout
8. 设置数据库的数量，默认数据库为0，可以使用SELECT <dbid>命令在连接上指定数据库id
    databases 16
9. 指定在多长时间内，有多少次更新操作，就将数据同步到数据文件，可以多个条件配合
    save <seconds> <changes>
    Redis默认配置文件中提供了三个条件：
    save 900 1
    save 300 10
    save 60 10000
    分别表示900秒（15分钟）内有1个更改，300秒（5分钟）内有10个更改以及60秒内有10000个更改。
10. 指定存储至本地数据库时是否压缩数据，默认为yes，Redis采用LZF压缩，如果为了节省CPU时间，可以关闭该选项，但会导致数据库文件变的巨大
    rdbcompression yes
11. 指定本地数据库文件名，默认值为dump.rdb
    dbfilename dump.rdb
12. 指定本地数据库存放目录
    dir ./
13. 设置当本机为slav服务时，设置master服务的IP地址及端口，在Redis启动时，它会自动从master进行数据同步
    slaveof <masterip> <masterport>
14. 当master服务设置了密码保护时，slav服务连接master的密码
    masterauth <master-password>
15. 设置Redis连接密码，如果配置了连接密码，客户端在连接Redis时需要通过AUTH <password>命令提供密码，默认关闭
    requirepass foobared
16. 设置同一时间最大客户端连接数，默认无限制，Redis可以同时打开的客户端连接数为Redis进程可以打开的最大文件描述符数，如果设置 maxclients 0，表示不作限制。当客户端连接数到达限制时，Redis会关闭新的连接并向客户端返回max number of clients reached错误信息
    maxclients 128
17. 指定Redis最大内存限制，Redis在启动时会把数据加载到内存中，达到最大内存后，Redis会先尝试清除已到期或即将到期的Key，当此方法处理 后，仍然到达最大内存设置，将无法再进行写入操作，但仍然可以进行读取操作。Redis新的vm机制，会把Key存放内存，Value会存放在swap区
    maxmemory <bytes>
18. 指定是否在每次更新操作后进行日志记录，Redis在默认情况下是异步的把数据写入磁盘，如果不开启，可能会在断电时导致一段时间内的数据丢失。因为 redis本身同步数据文件是按上面save条件来同步的，所以有的数据会在一段时间内只存在于内存中。默认为no
    appendonly no
19. 指定更新日志文件名，默认为appendonly.aof
     appendfilename appendonly.aof
20. 指定更新日志条件，共有3个可选值： 
    no：表示等操作系统进行数据缓存同步到磁盘（快） 
    always：表示每次更新操作后手动调用fsync()将数据写到磁盘（慢，安全） 
    everysec：表示每秒同步一次（折衷，默认值）
    appendfsync everysec
21. 指定是否启用虚拟内存机制，默认值为no，简单的介绍一下，VM机制将数据分页存放，由Redis将访问量较少的页即冷数据swap到磁盘上，访问多的页面由磁盘自动换出到内存中（在后面的文章我会仔细分析Redis的VM机制）
     vm-enabled no
22. 虚拟内存文件路径，默认值为/tmp/redis.swap，不可多个Redis实例共享
     vm-swap-file /tmp/redis.swap
23. 将所有大于vm-max-memory的数据存入虚拟内存,无论vm-max-memory设置多小,所有索引数据都是内存存储的(Redis的索引数据 就是keys),也就是说,当vm-max-memory设置为0的时候,其实是所有value都存在于磁盘。默认值为0
     vm-max-memory 0
24. Redis swap文件分成了很多的page，一个对象可以保存在多个page上面，但一个page上不能被多个对象共享，vm-page-size是要根据存储的 数据大小来设定的，作者建议如果存储很多小对象，page大小最好设置为32或者64bytes；如果存储很大大对象，则可以使用更大的page，如果不 确定，就使用默认值
     vm-page-size 32
25. 设置swap文件中的page数量，由于页表（一种表示页面空闲或使用的bitmap）是在放在内存中的，，在磁盘上每8个pages将消耗1byte的内存。
     vm-pages 134217728
26. 设置访问swap文件的线程数,最好不要超过机器的核数,如果设置为0,那么所有对swap文件的操作都是串行的，可能会造成比较长时间的延迟。默认值为4
     vm-max-threads 4
27. 设置在向客户端应答时，是否把较小的包合并为一个包发送，默认为开启
    glueoutputbuf yes
28. 指定在超过一定的数量或者最大的元素超过某一临界值时，采用一种特殊的哈希算法
    hash-max-zipmap-entries 64
    hash-max-zipmap-value 512
29. 指定是否激活重置哈希，默认为开启（后面在介绍Redis的哈希算法时具体介绍）
    activerehashing yes
30. 指定包含其它的配置文件，可以在同一主机上多个Redis实例之间使用同一份配置文件，而同时各个实例又拥有自己的特定配置文件
    include /path/to/local.conf

参考资料：
http://www.runoob.com/redis/redis-install.html

redis命令操作中心
redis的存储方式是键值对的形式，键永远是字符串类型，值有以下类型

字符串：string，哈希：hash，列表：list，集合：set，有序集合：zset

string字符串类型常用命令：

        set 'key1' 'value1' -- 设置一个键值对，键是key1，值是'value1'

        mset 'k1' 'v1' 'k2' 'v2'--设置多个键值对

        setex 'key2' 5 'value2' -- 设置一个键值对，另外设置一个过期时间，以秒为单位，不设置过期时间就是永久存储。键是key2  过期时间是5  值是'value2'

        get key1 -- 获取键为key1的值

        mget key1 key2 -- 获取多个键的值

        对值的运算：要求是键的值必须是数字才可以进行运算

                incr key1 -- 将键key1的值加1，不过这个例子会报异常，因为key1的值不是数字，这个就对了set 'k3' '1'-->incr k3-->get k3的结果就变成了'2'

                incrby k3 5 --可以指定一个数字让键所对应的值加上这个数字-->get k3的结果就变成了'7'

                decr k3 --将键为k3的值减去1

                decrby k3 5 -- 指定一个数字，让键所对应的值减去这个数字

        append key1 'v3'-- 对一个键的值追加内容，原来的键key1的值是'value1',现在的值变成了'value1v3'

        strlen key1 --获取一个键的值的长度，key1的值的长度为'value1v3'所以为8

键的命令：

        keys * -- 查看所有的键，查找键的命令是支持正则匹配的，*代表了所有

        exists key1 --结果为1--判断一个键是否存在，如果存在返回数字1，否则返回数字0

        type key1--结果为string--判断一个键的值的类型，咱们的key1键的值的类型是string

        del key1--将这个键以及所对应的值删除掉

        expire key1 5--将key1这个键设置一个5秒的过期时间，以秒为单位，时间到了键将会被清理，不设置过期时间就会一直存在

        ttl key1 --结果为5--查看一个键的有效时间

hash类型的常用命令：用于存储一个对象，一般对象就是个json格式形式

        hset key1 name '星'--设置一个键值对，键key1还是redis规定的键，值存储为hash类型，hash类型的值又是一个键值对name就是hash类型里面的键的名字，'星'就是hash类型里面的值

        hmset k1 n1 'v1' n2 'v2'--设置多个hash类型的值

        hget key1 name --获取hash类型的 值里面的 name键 所对应的值

        hgetall k1 --结果为n1 'v1' n2 'v2'--把所有的hash的键值对都获取出来

        hkeys k1 -- 结果为n1 n2--获取所有的hash的键

        hlen k1 -- 结果为2 -- 返回hash的键的总个数

        hvals k1 -- 结果为'v1' 'v2' -- 获取所有的hash的值

        hexists k1 'v1' -- 判断一个hash的值是否存在

        hdel k1 n1 -- 删除一个hash的键

        hstrlen k1 'v1'--结果为2 -- 返回hash的值的字符串长度

list类型常用命令：格式为键值对，不过注意的是list类型的值的类型必须为string类型，list类型支持头部插入或尾部插入

        lpush py1 'abc' -- 命令执行后就变成了一个列表，py1这个键指向了这个列表，在列表头部插入一个 值'abc'

        rpush py1 'def' -- 在py1指向的列表尾部插入一个值'def'

        目前的结构是这个样子

abc

def

        linsert py1 before 1 'ghi'-- 在目前这个列表索引值为1的值前面插入一个值'ghi'，结构变成

abc

ghi

def

        linsert py1 after 1 'gkl' -- 在目前这个列表索引值为1的值后面插入一个值'gkl'，结构变成

abc

ghi

gkl

def

        lpop py1 -- 从py1这个list中 在头部取出一个值，取出后这个值就不在是这个list中的一个值了

        rpop py1 -- 从py1这个list中 在尾部取出一个值，同上

        lrange py1 0 2 -- 结果是 abc，ghi，gkl -- 从py1这个list中取出索引为0到2的所有值，值取出后，这些值还会在list中，不会被删除

        lindex py1 1 -- 结果是'ghi' -- 返回列表里索引对应的值

        ltrim py1 1 2 -- 结果为'ghi','gkl' -- 意思是裁剪py1这个列表，从索引1裁剪到2，这样这个列表就只剩下索引1和2的值了，其余的值就被删除掉了

set类型常用命令：set类型其实值也属于一个list，只是set这个集合不能有重复的值，而且值得排序是无序的

        sadd py2 123 abc -- 添加操作，键是py2 值是123，abc 是set类型

        smembers py2 -- 结果是 123， abc -- 获取set里的所有值

        scard py2 -- 结果是2 -- 返回一个set集合里的所有值的个数

        sinter py2 py21 -- 结果是123 -- 求两个集合之间的交集 注意！py21的值为123，def

        sdiff py2 py21 -- 结果是abc -- 求这两个集合的差集 注意py2在前面，py2里面abc这个值py21里面没有，所以显示abc

        sunion py2 py21 -- 结果是123，abc，def -- 求这两个集合的并集

        sismember py2 def -- 结果为0 -- 判断def这个值是否在py2集合中，因为不在所以显示0