文章目录
Redis笔记
# 1.图片的描述、评论
文档类型的数据库,MongDB
# 2.图片
分布式文件系统 FastDFS
- 淘宝自己的 TFS
- Gooale的 GFS
- Hasoop的 HDFS
- 阿里云的 oss
# 3.商品的关键字
搜索引擎 solr elasticsearch
# 4.商品热门的波段信息
Redis Tair Memache
# 5.商品的交易,外部的支付接口
- 第三方的接口
1.内存存储、持久化、内存中是断电即失的 (rdb , aof)。
Redis安装
下好压缩包后,拉到home下,移动到opt下
# mv redis-6.2.5.tar.gz /opt
// 进入opt下查看
cd /opt
ls
// 解压
tar -zxvf redis-6.2.5.tar.gz
// 基本环境安装
yum install gcc -c++
make
make install
// redis默认启动环境不是后台启动,修改配置文件
daemonize yes(改成yes)
// 断开redis连接
shutdown #断开
exit #退出
启动redis
// 进入相应配置文件(/sur/local/bin)启动服务
# pwd
redis-server qconfig/redis.conf
// 使用redis-cli进行连接测试
redis-cli -p 6379(使用redis客户端进行连接)
ping
get name
keys *
// 有密码情况下:
redis-cli -h 127.0.0.1 -p 6379 -a myPassword
// 验证密码设置成功
config get requirepass
测试连接:
测试:100个并发连接 100000请求
redis-benchmark -h localhost -p 6379 -c 100 -n 100000
基础知识
# 切换数据库
select 7
# 查看内容
get name
// 清除当前数据库内容
flushdb #清空
key * #查看
// 清楚全部数据库的内容
flushall
Redis的基本数据类型
如字符串(string),散列(hashes),列表(list),集合(sets),有序集合(sorted sets),范围查询,bitmaps,hyperloglogs和地理空间(geospatial)索引半径查询。
String类型
EXISTS name # 判断当前的key是否存在
move name 1 # 移除当前的key
EXPIRE name 10 # 设置过期时间
ttl name # 查看倒计时
get name # 查看名字
type name # 查看当前key的类型
// 追加字符
set key1 v1 # 设置值
get key1 # 获得值
APPEND key1 "hello" # 追加字符串
STRLEN key1 # 查看长度
// 自增命令
set views 0
get views
incr views #自增1
decr views #自减1
INCRBY views 10 #增加步长
// 字符串范围
set key "hello,ya"
GETRANGE key 0 3 # 获取字符串[0,3]
GETRANGE key 0 -1 # 获取全部字符串
// 替换字符串
set key2 abcdef
SETRANGE key2 1 xx # 替换指定位置开始的字符串
// # setex (set with expire) 设置过期时间
# setnx (set if not exist) 不存在再设置 (分布式中常用) ,存在则设置失败
setex key3 30 "hello"
setnx mykey "redis"
// 设置多个值
mset k1 v1 k2 v2 k3 v3 # 设置多个值
mget k1 k2 k3 # 获得多个值
msetnx k1 v1 k4 v4 # 同时成功,同时失败
// 设置user对象 set user:1 {name:zhangsan,age:2}
mset user:1:name zhangsan user:1:age 2
mget user:1:name user:1:age
// getset方法
getset db redis # 如果不存在值,则返回nil,并设置新值
getset db abc # 如果存在值,则返回原来的值,并设置新值
Redis-Key
List类型
所有的list命令都是用l开头的
LPUSH list one # 将一个值或多个值插入到列表头部
LPUSH list two
LPUSH list 0 -1 #查看所有值
LPUSH list 0 1 #查看部分值
Rpush list righr # 将一个值或多个值插入到列表尾部
Set类型
127.0.0.1:6379> sadd mgset "hello" # set集合中添加匀速
(integer) 1
127.0.0.1:6379> sadd mgset "qinghua"
(integer) 1
127.0.0.1:6379> smembers mgset # 查看指定set的指定值
1) "hello"
2) "qinghua"
127.0.0.1:6379> sismember mgset hello #判断一个值是否在set中
(integer) 1
127.0.0.1:6379> scard mgset # 获取set集合中的内容元素个数
(integer) 2
127.0.0.1:6379> srem mgset hello #移除set集合中的元素
(integer) 1
127.0.0.1:6379> scard mgset
(integer) 1
// srandmember mgset # 随机抽选出一个元素
// del mgset # 删除set的集合
// sdiff key1 key2 # 差集
// sinter key1 key2 # 交集
// sunion key1 key2 # 并集
Hash(哈希)
# hset myhash filed qingfeng 存值
# hget myhash filed 得到值
# hgetall myhash 获取所有的值
# hdel myhash filed 删除hash指定的key字段
# hlen myhash 获取hash中的字段
# hexists myhash filed 判断hash中指定字段是否存在
# hkeys myhash 获得所有filed
# hset myhash filed1 5 指定增量
# hsetnx myhash filed1 hello 如果不存在则可以设置/ 如果存在不可以设置
# hset user:1 name qingqing 设置多个值
# hget user:1 name 获取值
Zset(有序集合)
zadd myset 1 one 2 two 3 three #添加多个值
zrange myset 0 -1 #查询所有值
zadd salary 2500 xiaohong
zadd salary 6000 xiaoming
zrangebyscore salary -inf +inf #按薪资排序
zrangebyscore salary -inf +inf withscores #按薪资排序并打印薪资
zcard salary #获取个数
zrevrange salary 0 -1 #按从大到小薪资排序
zcount myset 1 2 #获取指定区间的数量
特殊类型
geospatial 地理位置
属性:
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-pQknr8FS-1635059277374)(C:\Users\86183\AppData\Roaming\Typora\typora-user-images\image-20211017191829286.png)]
查询位置信息(经纬度) http://www.jsons.cn/lngcode(谷歌查询)
单位:
m 表示为米
km 表示为千米
mi 表示英里
ft 表示英尺
# 有效的经度-180到180度
# 有效的维度-85.051128到85.051128度
geoadd china:city 116.40 39.90 beijing # 添加位置信息
geopos china:city beijing # 获取北京的位置
geopos china:city beijing shanghai km # 获取北京到上海的直线距离
georadius china:city 110 30 1000 km # 查询以经纬度110 30为中心,以1000km 为半径的人
georadius china:city 110 30 500 km withcoord # 定位信息
hyperloglogs
PFadd mykey a b c d e # 存值
PFcount mykey # 统计mykey中的元素数量
PFmerge mykey3 mykey mykey2 # 合并mykey key2 => mykey3
如果允许容错,那么就使用Hyperloglogs
Bitmaps
位存储/ 位图场景
setbit sing 0 1 # 添加数据
getbit sing 1 # 查看是否打卡
bitcount sing # 统计打卡数
事务
Redis单挑命令式保存原子性,但事务不保证原子性,没有隔离级别的概念
multi # 开启事务
set k1 v1
set k2 v2
get k1
exec # 执行事务
discard # 放弃事务
//
watch money # 乐关锁
decrby money 10 #
incrby out 10 # 余额减去输出
Jedis
使用java操作Redis中间件
Redis持久化
# redis设置密码(进入6379端口)
config set requirepass "123456" # 设置密码
auth 123456 # 验证密码
config get requirepass # 获取信息
RDB(Redis Database)
在指定的时间间隔内将内存中的数据集写入磁盘,它恢复时将快照文件直接读到内存中。Redis会单独创建(fork)一个子进程进行持久化,会将数据写入到一个临时文件中,带持久化进程结束后,再将这个临时文件替换上次持久化好的文件。
AOF(Append Only File)
AOF 持久化记录服务器执行的所有写操作命令,并在服务器启动时,通过重新执行这些命令来还原数据集。 AOF 文件中的命令全部以 Redis 协议的格式来保存,新命令会被追加到文件的末尾。 Redis 还可以在后台对 AOF 文件进行重写(rewrite),使得 AOF 文件的体积不会超出保存数据集状态所需的实际大小。
redis-check-aof --fix appendonly.aof # 修复aof文件
发布订阅
# 订阅端:
subscribe qingfengshou
# 发送端:
publish qingfengshou "hello word"
Redis缓存穿透
缓存穿透概念
如果每次都去查一个“缓存和数据库中都必不存在的数据(如id=-1的数据)”,因为缓存中不存在,那么每次请求都会打到DB上,从而导致缓存失去意义,在高并发的情况下就可能导致数据库崩溃,这就是缓存穿透。
解决方法
-
规范key过滤
-
缓存空值
-
加锁
-
布隆过滤器
布隆过滤器是一种数据结构,对所有可查询的参数以hash形式存储,在控制层先进行校验,不符合规则的丢弃从而避免对底层存储系统的查询压力。
# 进入6379端口
info replication # 查看从机
# 如果主机断开了连接,我们可以 SLAVEOF no one 让自己变成主机
SLAVEOF 127.0.0.1 6379 # 将自己变成从机
哨兵模式
主从切换技术的方法是:当主服务器宕机后,需要手动把一台从服务器切换为主服务器,这就需要人工干预,费事费力,还会造成一段时间内服务不可用。这不是一种推荐的方式,更多时候,我们优先考虑哨兵模式。
哨兵模式是一种特殊的模式,首先Redis提供了哨兵的命令,哨兵是一个独立的进程,作为进程,它会独立运行。其原理是哨兵通过发送命令,等待Redis服务器响应,从而监控运行的多个Redis实例。
作用
- 通过发送命令,让Redis服务器返回监控其运行状态,包括主服务器和从服务器。
- 当哨兵监测到master宕机,会自动将slave切换成master,然后通过发布订阅模式通知其他的从服务器,修改配置文件,让它们切换主机。
哨兵出现问题,可以配置多哨兵模式,相互监控防止故障。
# 创建哨兵sentinel.conf
vim sentinel
sentinel monitor myredis 127.0.0.1 6379 1(数字1表示主机待机,slave选举票数最多的当选主机) # 监控主机
redis-sentinel qconfig/sentinel.conf # 启动哨兵
// 哨兵配置端口
port 26379(默认端口)
// 工作目录
dir /tmp
// 默认节点
sentinel monitor mymaster 127.0.0.1 6379 2
// 默认30秒
sentinel down-after-milliseconds mymaster 30000
缓存雪崩
缓存雪崩是指缓存由于某些原因整体或者大量失效,导致大量请求打到后端数据库,从而导致数据库崩溃,整个系统崩溃,发生灾难。
导致缓存整体或大量失效的场景一般有:
1、缓存服务宕机,如Redis集群彻底崩溃;
2、在某个集中的时间段内,系统预加载的缓存集中失效了;
预防和解决缓存雪崩
1、保证缓存层服务高可用性,如使用Redis Sentinel 和 Redis Cluster,双机房部署,保证Redis服务高可用。
2、通过设置不同的过期时间,来错开缓存过期,从而避免缓存集中失效。
monitor mymaster 127.0.0.1 6379 2
// 默认30秒
sentinel down-after-milliseconds mymaster 30000
**缓存雪崩**
缓存雪崩是指缓存由于某些原因整体或者大量失效,导致大量请求打到后端数据库,从而导致数据库崩溃,整个系统崩溃,发生灾难。
导致缓存整体或大量失效的场景一般有:
1、缓存服务宕机,如Redis集群彻底崩溃;
2、在某个集中的时间段内,系统预加载的缓存集中失效了;
**预防和解决缓存雪崩**
1、保证缓存层服务高可用性,如使用Redis Sentinel 和 Redis Cluster,双机房部署,保证Redis服务高可用。
2、通过设置不同的过期时间,来错开缓存过期,从而避免缓存集中失效。