google big table(翻译)

Google-Bigtable中文版_1.0.pdf_免费高速下载|百度网盘-分享无限制

关于bigtable 的一些思考:

1.数据如何保证不丢失?

       数据不丢失,数据在写之前先写hlog,再写memory store,尽管region挂了,仍然可以从hlog中恢复。为了提高写性能,并不是将region对应一个hlog,而是一个region server对应一个hlog,且将hlog以64M为界拆分多个file,后台线程对hfile及时索引文件对应的region方便recover。

从memory store,经过min_compaction,major_compaction 操作刷出的hfile 保存至hdfs,hdfs以副本方式保证了数据不丢失。

2.如何保证数据的一致性?

       数据的一致性,尽管bigtable将数据打散分布到不同的region上。但由于bigtable 在写模式上,采用一条数据只对应一个region(如果熟悉kudu或副本数据库会发现这里的区别),这样保证并发场景下可以保证数据强一致性。是强一致性,不是最终一致性,这里我需要强调一下。

3.与传统关系性数据库的区别?

    显然不支持ACID,只支持当row事务,数据采用LSMT存储(LSMT的论文查看我的历史博文)而不是b-树(大部分关系性数据采用b树存储,b-树的问题是数据update涉及索引的频繁修改,优点也是走索引快),因此big table应用场景在数据写多读少场景,这和关系型数据库不一样的地方,由它的底层索引和数据存储方式决定的。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值