Redis、数据结构、持久化(RDB、AOF)

1. 概念

redis是一款高性能的NOSQL系列的非关系型数据库

关系型和非关系型数据库比较：

1.1.什么是NOSQL

NoSQL(NoSQL = Not Only SQL)，意即“不仅仅是SQL”，是一项全新的数据库理念，泛指非关系型的数据库。
随着互联网web2.0网站的兴起，传统的关系数据库在应付web2.0网站，特别是超大规模和高并发的SNS类型的web2.0纯动态网站已经显得力不从心，暴露了很多难以克服的问题，而非关系型的数据库则由于其本身的特点得到了非常迅速的发展。NoSQL数据库的产生就是为了解决大规模数据集合多重数据种类带来的挑战，尤其是大数据应用难题。

1.1.1. NOSQL和关系型数据库比较

优点：

1）成本：nosql数据库简单易部署，基本都是开源软件，不需要像使用oracle那样花费大量成本购买使用，相比关系型数据库价格便宜。
2）查询速度：nosql数据库将数据存储于缓存之中，关系型数据库将数据存储在硬盘中，自然查询速度远不及nosql数据库。
3）存储数据的格式：nosql的存储格式是key,value形式、文档形式、图片形式等等，所以可以存储基础类型以及对象或者是集合等各种格式，而数据库则只支持基础类型。
4）扩展性：关系型数据库有类似join这样的多表查询机制的限制导致扩展很艰难。

缺点：

1）维护的工具和资料有限，因为nosql是属于新的技术，不能和关系型数据库10几年的技术同日而语。
2）不提供对sql的支持，如果不支持sql这样的工业标准，将产生一定用户的学习和使用成本。 3）不提供关系型数据库对事务的处理。
1.1.2. 非关系型数据库的优势： 1）性能NOSQL是基于键值对的，可以想象成表中的主键和值的对应关系，而且不需要经过SQL层的解析，所以性能非常高。
2）可扩展性同样也是因为基于键值对，数据之间没有耦合性，所以非常容易水平扩展。

1.1.3. 关系型数据库的优势：

1）复杂查询可以用SQL语句方便的在一个表以及多个表之间做非常复杂的数据查询。
2）事务支持使得对于安全性能很高的数据访问要求得以实现。对于这两类数据库，对方的优势就是自己的弱势，反之亦然。

1.1.4. 总结

关系型数据库与NoSQL数据库并非对立而是互补的关系，即通常情况下使用关系型数据库，在适合使用NoSQL的时候使用NoSQL数据库，
让NoSQL数据库对关系型数据库的不足进行弥补。
一般会将数据存储在关系型数据库中，在nosql数据库中备份存储关系型数据库的数据

1.2.主流的NOSQL产品 • 键值(Key-Value)存储数据库 相关产品： Tokyo Cabinet/Tyrant、Redis、Voldemort、Berkeley DB 典型应用：
内容缓存，主要用于处理大量数据的高访问负载。 数据模型： 一系列键值对 优势： 快速查询 劣势： 存储的数据缺少结构化 • 列存储数据库
相关产品：Cassandra, HBase, Riak 典型应用：分布式的文件系统 数据模型：以列簇式存储，将同一列数据存在一起
优势：查找速度快，可扩展性强，更容易进行分布式扩展 劣势：功能相对局限 • 文档型数据库 相关产品：CouchDB、MongoDB
典型应用：Web应用（与Key-Value类似，Value是结构化的） 数据模型： 一系列键值对 优势：数据结构要求不严格 劣势：
查询性能不高，而且缺乏统一的查询语法 • 图形(Graph)数据库 相关数据库：Neo4J、InfoGrid、Infinite Graph
典型应用：社交网络 数据模型：图结构 优势：利用图结构相关算法。 劣势：需要对整个图做计算才能得出结果，不容易做分布式的集群方案。

1.3 什么是Redis

Redis是用C语言开发的一个开源的高性能键值对（key-value）数据库，官方提供测试数据，50个并发执行100000个请求,读的速度是110000次/s,写的速度是81000次/s ，且Redis通过提供多种键值数据类型来适应不同场景下的存储需求，目前为止Redis支持的键值数据类型如下：
1) 字符串类型 string
2) 哈希类型 hash
3) 列表类型 list
4) 集合类型 set
5) 有序集合类型 sortedset

1.3.1 redis的应用场景

• 缓存（数据查询、短连接、新闻内容、商品内容等等）
• 聊天室的在线好友列表
• 任务队列。（秒杀、抢购、12306等等）
• 应用排行榜
• 网站访问统计
• 数据过期处理（可以精确到毫秒
• 分布式集群架构中的session分离

二、数据结构

1. 下载安装
   1. 官网：https://redis.io
   2. 中文网：http://www.redis.net.cn/
   3. 解压直接可以使用：
   • redis.windows.conf：配置文件
   • redis-cli.exe：redis的客户端
   • redis-server.exe：redis服务器端(先打开这个再打开 redis-cli.exe，就能命令行操作了)
2. 命令操作
   1. redis的数据结构：
   • redis存储的是：key,value格式的数据，其中key都是字符串，value有5种不同的数据结构
   • value的数据结构：
     1. 字符串类型 string
     2. 哈希类型 hash ： map格式 不支持重复（且有序）
     3. 列表类型 list ： linkedlist格式。 支持重复（且有序）元素
     4. 集合类型 set ： 不允许重复元素（且无序）
     5. 有序集合类型 sortedset：不允许重复元素，且元素有顺序

（redis的value）数据结构实际操作：

2.2 string

2. 字符串类型 string

1. 存储： set key value
   127.0.0.1:6379> set username zhangsan (在命令窗口敲字符串可以不用引号)
   OK
2. 获取： get key
   127.0.0.1:6379> get username
   “zhangsan”
3. 删除： del key
   127.0.0.1:6379> del age
   (integer) 1
   

2.3 类似Linkedhashmap

3. 哈希类型 hash 不支持重复（重复会覆盖掉而已，也不会爆错）（且有序）

1. 存储： hset key field value
   127.0.0.1:6379> hset myhash username lisi (这里的myhash是redis的键，username是field（map的键）)
   (integer) 1
   127.0.0.1:6379> hset myhash password 123
   (integer) 1
2. 获取：
   • hget key field: 获取指定的field对应的值
     127.0.0.1:6379> hget myhash username
     “lisi”
   • hgetall key：获取所有的field和value
     127.0.0.1:6379> hgetall myhash
     1. “username”
     2. “lisi”
     3. “password”
     4. “123”
3. 删除： hdel key field
   127.0.0.1:6379> hdel myhash username
   (integer) 1

2.4 类似LinkedList

4. 列表类型 list:可以添加一个元素到列表的头部（左边）或者尾部（右边）
允许重复元素（且有序）
（类似队列的操作）

1. 添加：

   1. lpush key value: 将元素加入列表左表
   2. rpush key value：将元素加入列表右边
      127.0.0.1:6379> lpush myList a
      (integer) 1
      127.0.0.1:6379> lpush myList b
      (integer) 2
      127.0.0.1:6379> rpush myList c
      (integer) 3

2. 获取：

   • lrange key start end ：范围获取
     127.0.0.1:6379> lrange myList 0 -1
     1. “b”
     2. “a”
     3. “c”

3. 删除：

   • lpop key： 删除列表最左边的元素，并将元素返回
   • rpop key： 删除列表最右边的元素，并将元素返回
     

2.5 类似Hashset

5. 集合类型 set ： 不允许重复元素，且无序

1. 存储：sadd key value
   127.0.0.1:6379> sadd myset a
   (integer) 1
   127.0.0.1:6379> sadd myset a
   (integer) 0
2. 获取：smembers key:获取set集合中所有元素
   127.0.0.1:6379> smembers myset
   1. “a”
3. 删除：srem key value:删除set集合中的某个元素
   127.0.0.1:6379> srem myset a
   (integer) 1
   

2.6类似linkedhashset

6. 有序集合类型 sortedset：不允许重复元素，且元素有顺序.每个元素都会关联一个double类型的分数。redis正是通过分数来为集合中的成员进行从小到大的排序。（排行榜用的多）

1. 存储：zadd key score value
   127.0.0.1:6379> zadd mysort 60 zhangsan
   (integer) 1
   127.0.0.1:6379> zadd mysort 50 lisi
   (integer) 1
   127.0.0.1:6379> zadd mysort 80 wangwu
   (integer) 1
2. 获取：zrange key start end [withscores]
   127.0.0.1:6379> zrange mysort 0 -1
   1. “lisi”
   2. “zhangsan”
   3. “wangwu”
      127.0.0.1:6379> zrange mysort 0 -1 withscores
   4. “zhangsan”
   5. “60”
   6. “wangwu”
   7. “80”
   8. “lisi”
   9. “500”
3. 删除：zrem key value
   127.0.0.1:6379> zrem mysort lisi
   (integer) 1

2.7
6.6 bitmap
介绍 ： bitmap 存储的是连续的二进制数字（0 和 1），通过 bitmap, 只需要一个 bit 位来表示某个元素对应的值或者状态，key 就是对应元素本身 。我们知道 8 个 bit 可以组成一个 byte，所以 bitmap 本身会极大的节省储存空间。
常用命令： setbit 、getbit 、bitcount、bitop
应用场景: 适合需要保存状态信息（比如是否签到、是否登录…）并需要进一步对这些信息进行分析的场景。比如用户签到情况、活跃用户情况、用户行为统计（比如是否点赞过某个视频）。

# SETBIT 会返回之前位的值（默认是 0）这里会生成 7 个位
127.0.0.1:6379> setbit mykey 7 1
(integer) 0
127.0.0.1:6379> setbit mykey 7 0
(integer) 1
127.0.0.1:6379> getbit mykey 7
(integer) 0
127.0.0.1:6379> setbit mykey 6 1
(integer) 0
127.0.0.1:6379> setbit mykey 8 1
(integer) 0
# 通过 bitcount 统计被被设置为 1 的位的数量。
127.0.0.1:6379> bitcount mykey
(integer) 2

去看这个详细：https://github.com/Snailclimb/JavaGuide/blob/master/docs/database/Redis/redis-all.md

7. 通用命令

1. keys * : 查询所有的键
2. type key ： 获取键对应的value的类型
3. del key：删除指定的key value(可以删除上面的任意一个)
   

3.持久化

持久化：
redis是一个内存数据库，当redis服务器重启，获取电脑重启，数据会丢失，我们可以将redis内存中的数据持久化保存到硬盘的文件中（这样下次关闭redis服务器再打开数据还在）。(非关系型数据库经常会发生存储可能会丢失数据，关系型数据库这方面会好点)

redis持久化机制：

1. RDB：

是默认方式，不需要进行配置，默认就使用这种机制，在一定的间隔时间中，检测key的变化情况，然后持久化数据

1. 编辑redis.windwos.conf文件

after 900 sec (15 min) if at least 1 key changed save 900 1
after 300 sec (5 min) if at least 10 keys changed save 300 10
after 60 sec if at least 10000 keys changed save 60 10000

2. 重新启动redis服务器，并指定配置文件名称
   D:\JavaWeb2018\day23_redis\资料\redis\windows-64\redis-2.8.9>redis-server.exe redis.windows.conf
   
   
   把redis.server关了，还可以打开cli.exe输入你的key还可以获取你的value，这里直接打开server再打开cli.exe输入你刚才打开的值还可以获取：
   

2. AOF

（比RDB更加IO操作，速度会慢）：日志记录的方式，可以记录每一条命令的操作。可以每一次命令操作后，持久化数据

5. 编辑redis.windwos.conf文件
   appendonly no（关闭aof） --> appendonly yes （开启aof）
   appendfsync always ： 每一次操作都进行持久化
   appendfsync everysec ： 每隔一秒进行一次持久化
   appendfsync no ： 不进行持久化

推荐：https://github.com/Snailclimb/JavaGuide/blob/master/docs/database/Redis/redis-all.md