redis-学习笔记（1）

NoSql

描述

​ 即Not-Only SQL (泛指关系型数据库)

作用

​ 应对基于海量用户和海量数据前提下的数据处理

特征

• 可扩容

• 大数据下高性能

• 灵活的数据模型

• 高可用

Redis 简介

概念

Redis(REmote DIctionary Server) 是用C语言开发的一个开源的高性能键值对（key-value）的数据库

特性

1. 数据间没有必然的关联关系
2. 内部才有单线程机制进行工作
3. 高性能
4. 多数据类型支持
   • 字符串类型 string
   • 列表类型 list
   • 散列类型 hash
   • 集合类型 set
   • 有序集合类型 sorted_set
5. 持久化支持，可以进行数据灾难恢复

Redis 的应用

• 为热点数据加速查询
• 任务队列
• 即时信息查询
• 失效性信息控制
• 分布式数据共享
• 消息队列
• 分布式锁

Redis 下载安装

Linux版

• 4.0

Windows 版本

• 以3.2版本作为主版本
• 下载地址: https://github.com/MSOpenTech/redis/tags
• 如果点击redis-server.exe 闪退，可以使用cmd 进入redis安装目录，执行 redis-server.exe redis.windows.conf

Redis 基本操作

信息添加

• 功能：设置key value数据

• 命令

  set key value

• 范例

  set name 张三

信息查询

• 功能：根据key查询对应的value，如果不存在，返回空(nil)

• 命令

  get key

• 范例

  get name

清屏命令

clear

推出

• quit
• exit
• 《esc》

Redis 数据类型

redis 自身是一个Map,其中所有的数据都是才有key::value的形式储存

• string String
• hash HashMap
• list LinkedList
• set HashSet
• sorted_set TreeSet

String

• 存储的数据：单个数据，最简单的数据存储类型，也是最常用的数据存储类型
• 储存数据格式：一个存储空间保存一个数据
• 存储内容:通常使用字符串，如果字符串以整数的形式展示，可以作为数字操作使用

基本操作

• 添加/修改数据

  set key value

• 获取数据

  get key

• 删除数据

  del key

• 添加/修改多个数据

  mset key1 value1 key2 value2

• 获取多个数据

  mget key1 key2

• 获取数据字符串个数(字符串长度)

  strlen key

• 追加信息到原始信息后部 (如果原始信息存在就追加，否则新建)

  append key value

扩展操作

• 设置数据增加指定范围值

  incr key
  incrby key increment
  incrbyfloat key increment
  

• 设置数值数据减少指定范围的值

  decr key
  decrby key increment
  

string 作为数值操作

• string 在redis内部默认就是一个字符串，当遇到增减操作incr,decr时会转成数值型进行计算。

• redis所有操作都是原子性的，采用单线程处理所有业务，命令时一个一个执行的，因此无需考虑并发所有带来的数据影响

• 注意： 按数值进行操作的数据，如果原始数据不能转成数值，或超越redis数值上限范围，将报错。

  9223372036854775807 (java中long型数据最大值， Long.MAX_VALUE)

Tips1

• redis用于控制数据库表主键id ,为数据库主键提供生成策略，保障数据表的主键唯一性
• 此方案适用于所有数据，并支持数据集群

设定生命周期

setex key seconds value
psetex key milliseconds value

redis 控制数据的生命周期，通过数据是否失效控制业务行为，适用于所有具有时效性限定控制的操作

注意事项

• 数据操作不成功的反馈与数据正常操作的差异

  1. 表示运行结果是否成功
     • (integer)0 —>false 失败
     • (integer)1 —>true 成功
  2. 表示运行结果值
     • (integer)3 —>3 3个
     • (integer)1 —>1 1个

• 数据未获取到

  (nil)等同于null

• 数据最大存储量

  512MB

• 数值计算最大范围(java中的long的最大值)

  9223372036854775807

hash

• 一个存储空间保存多个键值对数据
• hash类型:底层使用哈希表结构实现数据存储
  • 如果field数量较少，存储结构优化为类数组结构
  • 如果field数量较多，存储结构使用HashMap结构

基本操作

• 添加/修改数据

  hset key field value

• 获取数据

  hget key field
  hgetall key
  

• 删除数据

  hdel key field1

• 添加/修改多个数据

  hmset key field1 value field2 value2

• 获取多个数据

  hmget key field1 field2

• 获取哈希表中字段的数量

  hlen key

• 获取哈希表中是否存在指定的字段

  hexistx key field

扩展操作

• 获取哈希表中所有字段名或字段值

  hkeys key
  hvals key
  

• 设置指定字段的数值数据增加指定范围的值

  hincrby key field increment
  hincrbyfloat key field increment
  

注意事项

• hash类型下的value只能存储字符串，不允许存储其他数据类型，不存在嵌套现象，如果数据未获取到，对应值为(nil)
• 每个hash可以存储 $2^{32}-1$个键值对
• hash类型十分贴近对象的数据存储形式，并且灵活添加删除对象属性。但hash设计初衷不是为了存储大量对象而设计，切记不可滥用，更不可以将hash作为对象列表使用
• hgetall操作可以获取全部属性，如果内部field过多，遍历整体数据效率就会很低，有可能成为数据访问瓶颈

应用场景

• 购物车
• 抢购

list

• 数据存储需求: 存储多个数据，并对数据进入存储空间的顺序进行区分
• 需要的数据结构: 一个存储空间保存多个数据，且通过数据可以体现进入顺序
• list类型: 保存多个数据，底层使用双向链表存储结构实现

基本操作

• 添加/修改数据

  lpush key value1 [value2] ....
  rpush key value1 [value2] ....
  

• 获取数据

  lrange key start stop
  lindex key index
  llen key
  

• 获取并移除数据

  lpop key
  rpop key
  

扩展操作

• 规定时间内获取并移除数据

  blpop key1 [key2] timeout
  brpop key1 [key2] timeout
  

• 移除指定数据

  lrem key count value

• redis 应用于具有操作先后顺序的数据控制

注意事项

• list 中保存的数据保存都是string 类型，数据总容量是有限的，最多$2^{32}-1$个元素(4294967295)
• list 具有索引概念，但操作数据时通常以队列的形式进行入队出队操作，或以栈的形式入栈出栈操作
• 获取全部数据操作结束索引设置为-1
• list可以对数据进行分页，通常第一页的信息来自于list,第二页及更多的信息通过数据库的形式加载

应用场景

• 日志消息队列

set

• 存储需求:存储大量的数据，在查询方面提供更高的效率
• 存储结构: 能够保存大量的数据，高效的内部存储机制，便于查询
• set类型: 与hash存储结构完全相同，仅存储键，不存储值(nil),并且值是不允许重复的

基本操作

• 添加修改

  sadd key member [member2]

• 获取全部数据

  smembers key

• 删除数据

  srem key member1 [member2]

• 获取集合数据总量

  scard key

• 判断集合中是否包含指定数据

  sismember key member

扩展操作

• 随机获取集合指定数量的数据

  srandmember key [count]

• 随机获取集合中某个数据并将该数据移出集合

  spop key

• redis 应用与随机推荐类信息检索

• 求两个集合的交，并，差集

  sinter key1 [key2]
  sunion key1 [key2]
  sdiff key1 [key2]
  

• 求两个集合的交，并，差集并存储到指定集合中

  sinterstore destination key1 [key2]
  sunionstore destination key1 [key2]
  sdiffstore destination key1 [key2]
  

• 将指定数据从原始集合中移动到目标集合中

  smove source destination member
  

  Tips:

  • redis 应用于同类信息的关联搜索，二度关联搜索，深度关联搜索
  • 显示共同关注(一度)
  • 显示共同好友(一度)
  • 由用户A出发，获取到好友用户B的好友信息列表(一度)
  • 由用户A出发，获取到好友B的购物清单列表(二度)
  • 由用户A出发，获取到好友用户B的游戏充值列表(二度)

注意事项

• set类型不允许数据重复，如果添加的数据在set中已存在，将只保留一份
• set虽然与hash的存储结构相同，但是无法启用hash中存储值空间

应用场景

• 权限校验

• 网站流量统计

  • 利用set集合的数据去重特征，记录各种访问数据
  • 建立string类型数据，利用incr统计日访问量（PV-访问量）
  • 建立set模型，记录不同cookie数量（UV-独立访客）
  • 建立set模型，记录不同IP数量(IP-独立IP)

  redis应用于同类型数据的快速去重

• 黑名单，白名单

  • 基于经营战略设定问题用户发现，鉴别规则

  • 周期性更新满足规则的用户黑名单，加入set集合

  • 用户行为信息达到后与黑名单进行对比，确认行为去向

  • 黑名单过滤IP地址：应用于开放游客访问权限的信息源

  • 黑名单过滤设备信息：应用于设定访问设备的信息源

  • 黑名单过滤用户:应用于基于访问权限的信息源

    redis应用于基于黑名单与白名单设定的服务控制

sorted_set

• 存储需求:数据排序有利于数据的有效展示，需要提供一种可以根据自身特征进行排序的方式
• 存储结构：新的存储模型，可以保存可排序的数据
• sorted_set类型:在set的存储结构基础上添加可排序字段

基本操作

• 添加数据

  zadd key score1 member1 [score2 member2]

• 获取全部数据

  zrange key start stop [WITHSCORES]
  zrevrange key start stop [WITHSCORES]
  

• 删除数据

  zrem key member [member]

• 根据条件获取数据

  zrangebyscore key min max [WITHSCORES][LIMIT]
  zrevrangescore key max min [WITHSCORES]
  

• 根据条件删除数据

  zremrangebyrank key start stop
  zremrangebyscore key min max
  

  注意:

  • min与max用于限定搜索查询的条件
  • start与stop用于限定查询范围，作用于索引，表示开始和结束索引
  • offset与count用于限定查询范围，作用于查询结果，表示开始位置和数据总量

• 获取集合数据总量

  zcard key
  zcount key min max
  

• 集合交，并操作

  zinterstore destination numkeys key [key...]
  zunionstore destination numkeys key [key...]
  

扩展操作

• 获取数据对应索引

  zrank key member
  zrevrank key member
  

• score值获取与修改

  zscore key member
  zincrby key increment mbmber
  

  redis应用于计数器组合排序功能对应排名

注意事项

• score保存的数据存储空间是64位，如果是整数范围是 -9007199254740992~9007199254740992
• score保存的数据也可以是一个双精度的double值，基于双精度浮点数的特征，可能回丢失精度，使用时要慎重
• sorted_set底层存储还是基于set结构的，因此数据不能重复，如果添加相同的数据，score值将被反复覆盖，保留最后一次修改结果

应用场景

• 排行榜

• 时效类过期信息

  • 对于基于时间线限定的任务处理，将处理时间记录为score值，利用排序功能区分处理的先后顺序

  • 记录下一个要处理的时间，当到期后处理对应任务，移除redis中的记录，并记录下一个要处理的时间

  • 当新任务加入时，判定并更新当前下一个要处理的任务时间

  • 为提升soreted_set的性能，通常将任务根据特征存储成若干个sorted_set。例如一小时内，一天内，一周内，一月内，一个季度内，一年内等，操作时逐级提升，将即将操作的若干任务纳入1小时内处理的队列中

    redis应用于定时任务执行顺序管理或任务过期管理

jedis 使用

• jar包引入

  下载地址: https://mvnrepository.com/artifact/redis.clients/jedis

• 基于maven

<dependency>
    <groupId>redis.clients</groupId>
    <artifactId>jedis</artifactId>
     <version>2.9.0</version>
</dependency>

• 可视化客户端

  Redis Desktop Manager