Redis--RDB

最新推荐文章于 2024-06-17 17:39:56 发布
最新推荐文章于 2024-06-17 17:39:56 发布
阅读量26 收藏
点赞数
文章标签： redis 数据库 缓存
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_56446161/article/details/133255309
版权

文章目录

目录

文章目录

前言

一、基础知识

二、RDB文件(dump.rdb)创建

三、RDB文件载入

四、自动间隔性保存

五、RDB文件结构

总结

前言

主要学习了Redis的RDB持久化机制。

一、基础知识

  • RDB概念
    • RDB是redis的一种持久化机制，可以通过配置save选项配置，实现每隔一段时间，调用BGSAVE命令，将数据库某一时刻的内存快照写入磁盘里，默认900s 1/300s 10/60s 10000次修改触发BGSAVE命令，然后在需要恢复时将磁盘中的dump.rdb文件直接读到内存里
    • RDB保存的是一个dump.rdb文件，它是一个经过压缩的二进制文件，保存在磁盘里
  • 需要RDB的原因
    • Redis是一个内存数据库，需要定期将内存中的数据存储到磁盘里实现持久化，否则如果电脑宕机，会出现数据的丢失
  • RDB优缺点
    • 优点
      • 大规模且对数据恢复完整性不敏感的恢复，RDB比AOF更高效
    • 缺点
      • RDB最后一次持久化可能会丢失数据
        • 最后一次的rdb文件还没覆盖旧文件主机就宕机了，导致最后那段时间写的数据没有成功写入rdb文件里

二、RDB文件(dump.rdb)创建

  • SAVE
    • 阻塞服务器进程实现RDB文件(dump.rdb)的创建，持久化期间不接受新请求
  • BGSAVE
    • 服务器fork一个子进程完成RDB文件(dump.rdb)的创建，这个子进程和当前进程完全一样，子进程会创建一个临时文件，数据写入完成后用这个文件替代之前的旧文件，主进程还可以继续处理其他的请求，但是不会进行任何的内存与磁盘交互数据的IO
    • BGSAVE和BGREWRITEAOF两个命令处于性能的考虑不会同时执行
      • 如果BGSAVE执行中出现BGREWRITEAOF命令，BGSAVE完成后再执行BGREWIRTEAOF
      • 如果BGREWRITEAOF执行中出现BGSAVE命令，会拒绝执行BGSAVE
  • 写RDB文件和重写AOF文件都不会写入过期键，过期键删除时记录它的DEL写入AOF文件

三、RDB文件载入

  • Redis的载入策略是，先看看有没有开启AOF，因为AOF比RDB文件的更新频率更高，如果有AOF会载入AOF，如果没有AOF才载入RDB
  • Redis没有命令实现载入，只要检测到了RDB文件会自动载入
  • 载入过程中服务器进程阻塞
  • 主模式载入过程不会载入过期键，从模式载入所有键

四、自动间隔性保存

  • 如何配置
    • 通过在配置文件里完成save选项的配置，可以间隔的执行BGSAVE指令，由子进程完成数据的拷贝
    • 默认的配置是900秒修改1次；300秒修改10次；60秒修改10000次
  • 底层实现
    • saveparams数组：存三个saveparam，每个saveparam存秒数和修改数
    • dirty计数器：记录键值修改次数，每次执行BGSAVE或者SAVE命令后清零
    • lastsave属性：记录上一次SAVE或者BGSAVE的时间戳
    • serverCron方法每隔100ms检查一次是否满足saveparam的条件，满足就执行一次BGSAVE

五、RDB文件结构

  • REDIS：5B，用于标识RDB文件
  • db-version：4B，一个字符串用于标识数据库版本
  • databases：所有非空数据库(结构如下)
    • SELECTDB+db-number：1B+1B，376+x，执行SELECT命令切换到db-number指定的数据库
    • key-values-pairs：保存db-number数据库中的所有键值对(结构如下)
      • 无过期时间
        • TYPE：对象类型或底层编码之一
        • key：是一个String类型的字符串，编码应该是SDS的RAW或者INT
        • value
          • string：长度+值；int编码直接保存，raw可以直接保存也可以通过LZF算法压缩保存，压缩保存被解析到会进行解压
          • list/set：记录list/set的长度 + 所有元素
          • hash/zset：记录元素个数 + 键&值/值&分数紧挨着排列
          • INTSET/ZIPLIST(list/hash)底层编码：会被转换成字符串对象存储
      • 有过期时间(从模式会载入过期对象，主模式不载入)
        • EXPIRETIME-MS+ms：1B+8B，374+xxxxxxxx，这个键值对会在ms时间戳过期
        • TYPE+key+value
  • EOF：1B，377，结束标识符
  • check-sum：8B，CRC校验码检查RDB文件是否出错

总结

Ustinian565
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Redis持久化之RDB（详解）
酷小亚
10-10 2444
Redis持久化之RDB（详解） 一、初识RDB 二、RDB特点 1、优势 2、劣势 三、RDB操作 1、概述 2、操作 四、总结
Redis集群数据迁移:redis-rdb-tools离线安装以及使用
阿汤哥的部落格
10-21 1321
Redis集群数据迁移:redis-rdb-tools离线安装以及使用
linux安装redis-rdb-tools
Seth`s blog
03-12 4025
安装pip wget https://pypi.python.org/packages/source/p/pip/pip-1.5.4.tar.gz tar -xzvf pip-1.5.4.tar.gz cd pip-1.5.4 python setup.py install 安装redis-rdb-tools [root@taifund pip-1.5.4]# pip install rdbto...
redis-cli 命令详解
热门推荐
JineD的博客
04-08 1万+
命令使用: redis-cli [OPTIONS] [cmd [arg [arg ...]]] 选项说明: -h <hostname> Server hostname (default: 127.0.0.1). ip地址 -p <port> Server port (default: 6379).　服务器端口号 -s <socket> Server socket (overrides hostname an
【redis】Redis 分析工具 redis-rdb-tools
michaelwoshi的博客
01-16 2544
一、简介 redis是基于内存的kv数据库，内存作为存储介质，关注内存的使用情况是一个重要的指标。 解析内存有两种方法，一个是通过scan遍历所有key，二是对rdb文件进行分析。 rdb 是rdb-tools工具包其中之一的工具，也是解析dump.rdb文件的工具。 1、生成所有数据库和键中数据的内存报告 2、将转储文件转换为JSON 3、使用标准差异工具比较两个转储文件 rdbtools工具包括了3个可执行文件： 1、rdb ...
redis-rdb-tools安装以及bigkeys抓取
m0_56373044的博客
09-18 395
Bigkeys一直是令很多dba头疼的事情，如何准确的抓出Bigkeys并快速定位内存上升的原因是很多dba需要做的重要任务。本文主要介绍redis-rdb-tools安装以及快速抓取Bigkeys，希望对各位有用
RDB分析工具redis-rdb-tools官方文档翻译
zhaohongfei_358的博客
10-12 2376
rdb文件分析工具使用的是github项目 https://github.com/sripathikrishnan/redis-rdb-tools 文章目录简介安装rdbtools命令行使用样例过滤解析后的输出将dump文件转为JSON生成内存报告找出单个Key的内存使用情况对比RDB文件转为Redis协议的数据流Python中使用解析器 简介 Rdbtools 是用于解析Redis的 dump...
Redis内存分析工具之redis-rdb-tools的安装与使用
weixin_48380416的博客
04-06 9056
Redis内存分析工具之redis-rdb-tools的安装与使用
RDB分析工具redis-rdb-tools的安装
zhaohongfei_358的博客
10-12 3345
文章目录安装redis-rdb-toolswindows安装python-lzf报错解决方案 安装redis-rdb-tools 1.安装Python环境。推荐python3.6+ 2.安装rdbtools pip install -i https://pypi.tuna.tsinghua.edu.cn/simple rdbtools 安装到这一步，已经可以用了，只不过解析比较慢。 3.安装p...
使用redis-shake进行数据迁移(rdb-＞cluster；cluster-＞cluster 两种方式)
weixin_45313628的博客
05-30 854
使用redis-shake进行数据迁移(旧集群bgsave 使用redis-shake 将备份的rdb文件恢复到新集群)
redis-rdb-tools-master的安装与简单使用.zip
10-15
redis的dump.rdb文件分析工具
redis-rdb-cli：Redis rdb CLI：一种CLI工具，可以解析，过滤，拆分，合并rdb并离线分析内存使用情况。 它还可以同步2个Redis数据，并允许用户定义自己的接收器服务以将Redis数据迁移到某个地方
01-29
redis-rdb-cli 可以解析，过滤，拆分，合并rdb并离线分析内存使用情况的工具。 它还可以同步2个Redis数据，并允许用户定义自己的接收器服务以将Redis数据迁移到某个地方。 与作者聊天 与作者签约 二进制发行 运行时...
Redis-7.0.13-Windows-x64-with-Service
10-06
Upgrade urgency SECURITY: See security fixes below. Security Fixes (CVE-2023-41053) Redis does not correctly ...Ensure that the function load timeout is disabled during loading from RDB/AOF and on repli
java-redis-rdb.zip
07-15
java-redis-rdb 是一个用来解析 Redis 的 dump.rdb 文件的 Java 开发包。 标签：javaredisrdb redis
redis-rdb-tools, 解析 dump.rdb 文件，分析内存，并将数据导出到 JSON.zip
09-18
redis-rdb-tools, 解析 dump.rdb 文件，分析内存，并将数据导出到 JSON 解析Redis文件，分析内存，并将数据输出到 JSONRdbtools是一个用于 Redis dump.rdb 文件的解析器。 解析器生成类似于sax解析器的事件，并且是...
Spring Security实现用户认证四：使用JWT与Redis实现无状态认证
不做菜虚困的博客
06-12 815
在基本的通信流程中，我们一般采用Session去存储用户的认证状态。在Spring Security实现用户认证三中讲过，在拿到前端传输过来的用户名和密码之后，会有专门的过滤器处理这部分的需求，并且对认证成功的用户生成Token且存储在Session中。在下次发起请求时，直接从Session中取出同用户名的token进行密码哈希的比较要认证用户。对于无状态认证，则我们的认证不依赖与服务器端存储的Session的状态。所以无状态认证需要我们每次从前端传输一个包含完整认证信息的Token到服务器端进行自定义的认
【redis的基本数据类型】
m0_50116974的博客
06-13 618
压缩列表的基本信息包括压缩列表的大小，压缩列表的长度以及最后一个entry的偏移，之所以要有这个偏移，是为了找到最后一个entry,而每个entry都记录上一个元素的大小，通过计算就知道上一个entry的地址，这样方便的从后向前进行遍历。的结构，其分为两部分，8字节的Redis对象元数据信息，8字节的指针，其中Redis对象的元数据信息存储了类型的LRU信息，真正的编码格式等等，而如果字符串存储的是数字类型，则复用了8字节的指针的位置。的操作，但是当列表的元素非常少的时候，其内部使用。
Redis简介
最新发布
YJ_12340的博客
06-17 422
Redis（Remote Dictionary Server）是一个开源的高性能键值对存储系统，以其快速、灵活和可扩展性而著称。它是一个内存中的数据结构存储系统，支持多种数据类型，可以作为数据库、缓存、消息队列和发布/订阅系统使用。
026、工具_redis-server
细致-专业-实操
06-12 341
整个内存检测的时间比较长。通常无需每次开启Redis实例时都执行–test-memory选项，该功能更偏向 于调试和测试，例如，想快速占满机器内存做一些极端条件的测试，这个功 能是一个不错的选择。redis-server除了启动Redis外，还有一个 --test-memory选项。
redis redis-check-aof.pdb redis-check-rdb.pdb文件是做什么的
03-14
这些文件是 Redis 数据库的工具文件，redis-check-aof.pdb 用于检查和修复 AOF 文件，redis-check-rdb.pdb 用于检查和修复 RDB 文件。它们可以帮助用户检查 Redis 数据库文件的完整性和正确性。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值