log format-levelDB源码解析

基本概念:

逻辑记录:用户输入的key value,进行包装后,可以形成一条记录,我们把它称为逻辑记录;

物理记录:一条或多条物理记录组成一个逻辑记录。

block:一条逻辑记录,包含了一个或多个block,kBlockSize = 32768;即每个block的大小为32K;当然一个block里面也可以有多个record;


关系示意图:

一个逻辑记录由一个或多个block组成的情况




一个block包含多个逻辑记录的情况





RecordType:

    kFullType    代表这个记录,整个都在block中;

    kFirstType   代表一条记录,至少需要2个block,而当前block包含了该记录的第一片信息;

    kMiddleType  代表一条记录,至少需要3个block,而当前block包含了该记录的中间的信息;

    kLastType    代表一条记录,至少需要2个block,而当前block包含了该记录的最后一片的信息;

block的结构:            


如上图为block的结构,它由多个(header+data)组成;

header:checksum + length + type

checksum:4个字节的crc数据校验码,小端保存;根据type和data生成的crc校验码;

length:data的数据长度,2个字节,因为block是32K,所以2字节足够了,小端保存;

type:就是上面讲的RecordType了;


几个值得说明的地方:

1、block包含一个或多个(header+data);

2、开始一条新纪录,当一个block只剩下小于等于6个字节的时候,用\x00填充;

3、开始一条新纪录,当一个block只剩下超过6个字节的时候,可以重新开始一个header,所以有可能没有data(当只剩7个字节的时候);

4、每个block的开头一定是header

5、逻辑记录=一个或多个(header+data),其中data有可能为空

6、物理记录就是header+data,,其中data有可能为空

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
要阅读Leveldb源码,你可以按照以下步骤进行: 1. 确保你对C++语言有基本的了解。Leveldb是用C++编写的,因此你需要熟悉C++的语法和面向对象编程的概念。 2. 阅读Leveldb的README文件。这个文件提供了关于Leveldb的基本信息,如其用途、功能和性能特征。同时,它还列出了Leveldb的依赖关系,这对于理解源码以及构建和运行Leveldb非常重要。 3. 了解Leveldb的核心概念和数据结构。Leveldb是一个高效的键值存储库,它使用了一些关键的数据结构,如有序字符串表(Skip List)和持久化存储。 4. 查看Leveldb的目录结构。Leveldb源码包含了一些核心文件和目录,如“db”目录下的文件是Leveldb的核心实现。理解源码的组织结构可以帮助你快速找到感兴趣的部分。 5. 阅读核心文件的源码。从“db/db_impl.cc”文件开始,这个文件是Leveldb的主要实现。阅读这个文件可以帮助你了解Leveldb如何管理内存、实施并发控制和实现持久化存储。 6. 跟踪函数调用和数据流。了解Leveldb的主要功能是如何通过函数调用进行实现的很重要。你可以使用调试器或添加日志输出来跟踪函数调用和数据流,这有助于你了解代码的执行流程和逻辑。 7. 阅读Leveldb的测试用例。Leveldb源码中包含了大量的测试用例,这些用例对于理解Leveldb的不同功能和特性非常有帮助。通过阅读和运行这些测试用例,你可以对Leveldb的行为有更深入的了解。 8. 参考文档和论文。如果你想更深入地了解Leveldb的实现原理和技术细节,可以查阅Leveldb的官方文档或相关的论文。这些文档可以为你提供更详细的信息和背景知识。 最后,要理解Leveldb源码并不是一件简单的任务,需要投入大量的时间和精力。所以,建议你在阅读源码之前,对C++和数据库原理有一定的了解和经验,同时也要具备耐心和持续学习的精神。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值