redis 备份导出rdb_Redis总结理论

最新推荐文章于 2024-08-12 17:41:14 发布
最新推荐文章于 2024-08-12 17:41:14 发布
阅读量624 收藏
点赞数
文章标签： redis 备份导出rdb
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_36149997/article/details/112317003
版权
本文介绍了Redis数据库的基本概念、与Memcached的区别、数据类型特性、事物处理和持久化方法。重点讨论了RDB（Redis Database）快照持久化和AOF（Append Only File）日志持久化的原理、优缺点以及在数据恢复时的速度对比。同时，文中提到了Redis主从同步的过程和解决Redis出现问题的策略。
摘要由CSDN通过智能技术生成

853618f425719c8672721716077904be.png

前言

  • 什么是Redis

  • Redis与Memcached区别

  • Redis类型特征

  • Redis事物

  • Redis事物过程

  • 可能出现的问题

  • Redis持久化

  • 场景持久化类型

  • RDB

  • RDB工作原理

  • 什么是dump数据写入文件

  • rdb导出的时候可能会发生的问题

  • AOF持久化

  • aof重写指的是什么

  • 如果aof和rdb文件都存在优先采用谁?

  • 恢复数据时rdb和aof那个恢复最快

  • 主从通信过程

  • Redis出现问题

dac991b37cfffc89afacb7cf6b20d9a5.png

总结

什么是Redis

Noonly sql 数据库,键值对存在形式

存储在内存中

数据结构类型多

可以用于缓存,提高性能,减少数据库压力

Redis与Memcached区别

Redis是最终存储在磁盘,一般情况不会导致数据丢失, Memcatched存储在内存,只是用于缓存

redis数据结构类型种类多,memcached只有一种数据类型

Redis类型特征

Redis事物

事物大家应该不是特别陌生, redis的事物与数据库的事物不一样,在最大的区别在于回滚问题

redis的事物指的就是让正确的命令放到队列里面(检查命令是否正确)

然后在队列里把正确的命令依次执行

如果你的命令对于redis来说是正确的,但是对于你的业务来说是错误的,那么这个时候是不能撤销的

严格的说他的事物不叫回滚,叫取消更恰当,因为他只是检查命令是否正确,并没执行命令,而是放到队列,然后再执行

Redis事物过程

multi:标记一个事物块的开始

事物块里的多条内容会依次放到队列当中执行

最后执行exec命令原子性执行

可能出现的问题

在事物中可能会出现一种问题

当前A的value值为1, C事物对A进行了修改-1.B事物也对A进行了修改-1. 当c提交完事物的时候value值变为-1,但是B不知道,所以这个时候B 减一为负数,所以利用乐观锁机制实现

Redis持久化

什么是持久化,大白话叫做不丢失,唯一做到不丢失的方法就是把他存储到磁盘上.Redis持久化有两种方式,1 RDB文件 2 AOF持久化

场景持久化类型

1保存到磁盘上

2主从

3保存到日志

RDB

你可以把RDB理解为照相机,快照

1通过rdb快照持久化

通过在内存进行快照放到disk磁盘上

RDB工作原理

1每个n分钟进行写操作

2把内存中的dump数据形成rdb文件

3压缩

4放到备份目录

什么是dump数据写入文件

首先 60 分钟内是否有超过10000次key的变化

然后再300分钟内是否有10次的变化

最后看900分钟内是否有1次key的变化

如果符合上述的条件则插入到rdb文件中

rdb导出的时候可能会发生的问题

rdb在导出的时候会出现另起一个线程导出,这个时候你依旧可以操作redis,但是如果rdb已经内存满了,这个时候如果再对redis操作会导致报错,所以需要设置参数, 如果导出过程出错了,那么另一个线程停止向rdb文件写入

当把内存rdb文件里的内容依次导入到磁盘的时候,如果文件很大也会消耗性能所以通过设置,对文件进行压缩

AOF持久化

作用原理:

把 每条命令都写到一个文本文件内

问题:

当是我们不能执行一条命令就向文件写入,因为这样会导致速度变慢,本来我们一直对内存操作,数据很快,但是一直向文件写入会导致速度下降

aof重写指的是什么

aof重写指的是内存中的数据逆向成命令写入到aof日志里

如果aof和rdb文件都存在优先采用谁?

aof

恢复数据时rdb和aof那个恢复最快

rdb恢复最快,因为他是从磁盘加载到内存中的,而aof采用的是命令加载到内存中

主从通信过程

第一步 salve和master先自动的进行异步通信,sync

第二步通过dump rdb到slave 大批量数据

第三步通过缓存aof 到slave

最后通过一个线程来保持持续更新

Redis出现问题

Redis宕机了,或者连不上怎么办?

1配置主从复制,哨兵模式

如果redis在高峰期的时候时间过期失效,这个时候怎么办?

1.设置条件查询判断，判断redis缓存里是否有数据，如果没有，则去往数据库连接

2.设置分布式锁,如果第一线程发现宕机,不能让其他线程一直等待

3.第二个线程从数据库中查询到数据再放入redis.

如果用户不停的查询一条语句数据库中没有缓冲也没有这个时候怎么办?

1 从数据库查询,如果为空,做判断处理

2 把空的数据参数为"empty"

3这样使用在调用的时候就一直访问的是redis,这个时候根据业务逻辑提示给用户信息

总结

Lucky O(∩_∩)O

————————————————

版权声明：本文为CSDN博主「王雪芬-Judy领袖」的原创文章，遵循CC 4.0 

d287ea50e16e05edff53637575d8cb5e.png                                                     29c29827780ecc9e0167a37b6f8ee327.png

我没有超神
关注
linux合并fa文件_Linux 实用命令（不断更新）
weixin_39632982的博客
12-30 444
1 | 使用axel命令10线程下载软件axel -n 10 url/xxx.tar.gz 2 | 更简洁实用的man命令--tldrtldr tar3 | pyenv命令在用户目录安装使用不同版本pythonpyenv install 3.5.14 | pyenv命令无root安装perl，用法类似pyenvplenv install 5.22.05 | 批量杀掉指定程序ps -ef |grep...
Redis概述及linux安装redis
黄小龙的博客
10-27 993
文章目录1.Redis是什么2.Redis特点3.Redis能做什么4.安装redis第一步 下载redis第二步 解压压缩包第三步 yum安装gcc依赖第四步 跳转到redis解压目录下第五步 编译安装5.启动redis方式一 直接启动redis方式二 以后台进程方式启动redis第一步：修改redis.conf文件第二步：指定redis.conf文件启动6. redis的helloworld 1.Redis是什么 Redis:REmote DIctionary Server(远程字典服务器) 是完全
Redis 数据导入导出
最新发布
a120608yby的博客
08-12 371
Redis 数据导入导出
redis stream持久化_一文深度揭秘Redis的磁盘持久化机制
weixin_42355400的博客
12-24 312
前言Redis 是内存数据库，数据都是存储在内存中，为了避免进程退出导致数据的永久丢失，需要定期将 Redis 中的数据以数据或命令的形式从内存保存到本地磁盘。当下次 Redis 重启时，利用持久化文件进行数据恢复。Redis 提供了 RDB 和 AOF 两种持久化机制，前者将当前的数据保存到磁盘，后者则是将每次执行的写命令保存到磁盘(类似于 MySQL 的 Binlog)。本文将详细介绍 RDB...
redis 备份导出rdb_三种redis数据导出导入方式
weixin_39685762的博客
12-21 3399
推荐博客链接：https://www.cnblogs.com/hjfeng1988/p/7146009.htmlhttps://blog.csdn.net/qq_14945847/article/details/77986900***建议使用最后一种***一、redis-dump方式#redis-dump安装yum install ruby rubygems ruby-devel -ygem so...
redis 清空缓存_redis简单安装学习
weixin_39663729的博客
11-24 225
redis 介绍Redis是noSql也就是非关系型数据库，可以用来做缓存，缓存就是在内存中存储的数据备份，当数据没有发生本质改变的时候，我们就不让数据的查询去数据库进行操作，而去内存中取数据，这样就大大降低了数据库的读写次数，而且从内存中读数据的速度比去数据库查询要快一些，这样同时又提高了效率。一、redis单实例搭建1. 下载redis-5.0.4.tar.gz(最新稳定版本)2. 解压源码进...
redis 导出csv_redis的持久化文件rdb的分析
weixin_39537680的博客
12-20 398
一、安裝方法：pip install rdbtools二、使用方法：1.幫助命令 rdb --help-c FILE #指定rdb文件;-f FILE #指定导出文件;-n DBS #解析指定数据库,如果不指定默认包含所有;-k KEYS #指定需要导出的KEY,可以使用正则表达式;-o NOT_KEYS #指定不需要导出的KEY,可以使用正则...
redis 导出csv_redis-rdb-tools来解析分析reids dump文件及内存使用量
weixin_39623050的博客
12-20 463
一. 前言解析redis的dump.rdb文件，分析内存，以JSON格式导出数据。|提供的功能有：1. 生成内存报告2. 转储文件到JSON3. 使用标准的diff工具比较两个dump文件Rdbtools是以python语言开发的。二. 安装2.1 前提条件1. python2.4以上版本 和 pip2. redis-py可选，只运行在测试用例下2.2 从PyPI安装(推荐)# /usr/loca...
Redis数据导入导出以及数据迁移的4种方法详解
09-08
第二种方法是通过自定义脚本（例如 `xttblog_redis_mv.sh`）迁移数据。该脚本通过 `redis-cli` 连接源和目标 Redis 实例，获取指定前缀的键并逐个迁移。这种方法的优点是灵活，但不适用于大规模数据迁移，因为它使用...
使用rdbtools工具分析redis备份RDB文件
ithover的博客
06-11 675
要分析redis的备份RDB文件，rdbtools是首选 安装rdbtools 先看下本机有没有装rdb whereis rdb 没有安装的话就要开始安装了,为因rdbtool是由python写的，所以用python的pip方式安装会方便很多， 先安装pip 1.安装python-pip yum install python-devel python-pip 2.安装rdbtools pip install rdbtools 为了避免rdbtools在分析工作中报WARNING: python-lz
【redis】三种redis数据导出导入方式
热门推荐
九师兄
05-25 2万+
1.概述 转载：三种redis数据导出导入方式 一、redis-dump方式 redis-dump安装 yum install ruby rubygems ruby-devel -y gem sources --add http://gems.ruby-china.com/ --remove https://rubygems.org/ [root@docker ~]# gem sources -l *** CURRENT SOURCES *** http://gems.ruby-china.com/ .
redis-rdb-tools, 解析 dump.rdb 文件，分析内存，并将数据导出到 JSON.zip
09-18
redis-rdb-tools, 解析 dump.rdb 文件，分析内存，并将数据导出到 JSON 解析Redis文件，分析内存，并将数据输出到 JSONRdbtools是一个用于 Redis dump.rdb 文件的解析器。 解析器生成类似于sax解析器的事件，并且是非常有效的内存逻辑。此外，rdbtools还提供了以下工具：在
redis 备份导出rdb_redis 备份rdb持久化文件
weixin_39586915的博客
12-21 94
#!/bin/shmsg=`redis-cli -a 123456 bgsave`result=`redis-cli -a 123456 info Persistence |grep rdb_bgsave_in_progress |awk -F":" '{print $2}'`echo $result;while [ `echo $result` -eq "1" ] ;dosleep 1res...
redis 备份导出rdb_Redis RDB方式数据备份与恢复【详解】
weixin_33957089的博客
01-12 178
Redis数据备份实例127.0.0.1:6379> bgsaveOKRedis恢复数据1、 获取redis备份目录127.0.0.1:6379> CONFIG GET dir1) "dir"2) "D:\\software\\Redis"127.0.0.1:6379>以上命令 CONFIG GET dir 输出的 redis 备份目录为 /usr/local/redis/bin...
redis 备份导出rdb_redis学习--的持久化数据备份（RDB和AOF）
weixin_39628160的博客
12-21 324
一、dump.rdb文件是怎么生成的二、什么是redis持久化三、redis的RDB是什么？四、redis配置文件redis.config相关配置五、redis优点六、redis缺点redis比memcache作为缓存数据库强大的地方：(1)支持数据类型比较多，(2)redis持久化功能。一、dump.rdb文件是怎么生成的在redis服务挂掉的时候，根据redis的配置文件，会自动备份数据到本地...
redis 备份导出rdb_关于Redis RDB方式数据备份与恢复
weixin_30753697的博客
01-12 154
关于Redis RDB方式数据备份与恢复下面由Redis教程栏目给大家介绍Redis RDB方式数据备份与恢复，希望对需要的朋友有所帮助！Redis RDB方式数据备份与恢复Redis数据备份实例127.0.0.1:6379> bgsaveOKRedis恢复数据1、 获取redis备份目录127.0.0.1:6379> CONFIG GET dir1) "dir"2) "D:\\sof...
redis 备份导出rdb_Redis的两种备份（持久化）方式：RDB和AOF
weixin_39541767的博客
12-21 173
在 Redis 中存在两种方式的备份：一种是快照恢复(RDB)，通过快照(snapshotting)实现的，它是备份当前瞬间 Redis 在内存中的数据记录。另一种是只追加文件(Append-Only File，AOF)，其作用就是当 Redis 执行写命令后，在一定的条件下将执行过的写命令依次保存在 Redis 的文件中，将来就可以依次执行那些保存的命令恢复 Redis 的数据了。RDB备份对于...
redis 支持 json_Redis数据迁移利器之redisshake
weixin_39609166的博客
11-26 234
“当需要进行Redis实例或集群数据迁移时，我们可以采用导出/导入的方式进行数据迁移，但当需要做数据异地灾备或双活时，再使用传统的方式就不合适了，我们需要借助工具(如redis-port/redis-shake)来完成。”redis-shake介绍redis-shake就是一款非常好用的工具，可以支持备份、恢复、解析、同步等功能，主要的功能有：decode，对RDB文件进行读取，并以js...
redis 数据导出及导入
学习笔记
06-20 2653
redis 数据导出。redis 数据导入。
redis客户端导出数据
06-01
要导出 Redis 数据，可以使用 ...此时，最好使用 Redis 自带的备份工具 `redis-cli --rdb <filename>` 来进行备份。该工具可以在不停止 Redis 服务器的情况下完成备份操作，并且可以在备份过程中对数据进行读写操作。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值