高级数据系统 之 二、LSM-tree model for KVS

本文探讨了在设计键值存储(KVS)系统时,特别是使用LSM-tree模型的需求和考虑因素。系统设计关注读写性能、模块结构、数据一致性与线性化。LSM-tree允许在磁盘上进行追加写操作,通过内存哈希表索引数据,提供了一种在读写之间平衡的方法。文章还提到了其他如Bitcast和LMDB的存储结构。
摘要由CSDN通过智能技术生成

二、LSM-tree model for KVS

设计系统需要考虑的内容

  • 需求: key-value
  • 功能接口:
  • 架构:有的侧重读,有的侧重写
  • 模块
  • 模块内数据结构、算法
  • 模块间接口
  • 测试

功能需求

  • KVS的存储

    • 扩展存储(多节点):一致性哈希 —— 增加机器的时候,迁移的数据少。
  • 点操作:

    • 操作一个数据的读和写
  • 范围操作:

    • 操作多个数据的读 [start_key,end_key]
  • 容错(A,D)

    • Durability:保证commit之后落盘,防止在内存中宕机等事故,丢失数据 —— 日志可以保证
    • Atomic: 这里只讨论一个数据的读和写,就很好保证原子性
  • 一致性

    • 可线性化:时间点在后面的’读’一定能读到 它 前面时间点的’写’。

    • KVS的点操作:

      • 不同数据:不会出现一致性问题
      • 相同数据:
        • 当 写——>读 无交集,一定要保证读能读到写的内容
        • 当 读——>写 or 写——>读 有交集时 可以找到一个可归约的点来保证一致性。
        • </
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值