rocksdb写放大_rocksdb读/写/空间放大分析

rocksdb基于Log-Structured Merge (LSM) Trees,分析rocksdb存储引擎的读写空间放大比例,即主要对LSM Trees结构进行分析,相关基础概念以论文A Comparison of Fractal Trees to Log-Structured Merge (LSM) Trees中的定义为准。

先来看基础概念:

1> Read amplification is the number of I/O’s required to satisfy a particular query.

读放大:一次指定查询所需的IO操作数目。

2> Write amplification is the amount of data written to storage compared to the amount of data that the application wrote.

写放大:实际写入磁盘的数据大小比上用户期望程序写入的数据量。

3> Space amplification is the space required by a data structure can be inflated by fragmentation or requirements for temporary copies of the data.

空间放大:存储采用的数据结构因分裂或临时数据拷贝造成的磁盘空间占用放大。

LSM Trees有leveled和size-tiered两种形式:

1. Leveled LSM Trees

从第Level 0到Level h(h>1)所在层数据大小按k倍逐层增长,例如k=10,总计7层时,对应level 6有不超过10TB大小的数据。

假定数据集总大小为N,增长因子

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值