美团一面:为什么选用Hbase,Hbase和MySQL的区别是什么?

本文探讨了LSMTree在数据存储中的优势,特别是在HBase这类NoSQL数据库中的应用,对比了与MySQL的传统关系型数据库在SQL功能、事务处理和使用场景上的差异,指出HBase适合大数据场景且在高写入量下表现更好,但对读性能有所牺牲。
摘要由CSDN通过智能技术生成
  • 从磁盘读数据是以页为单位,根据这个特点使用平衡多路查找树

  • B+树的非叶子节点存放索引,叶子节点存放数据

  • 非叶子节点能够存放更多的索引,树的高度更低

  • 叶子节点通过指针相连,有利于区间查询

  • 叶子节点和根节点的距离基本相同,查找的效率稳定

  • 数据插入导致叶子节点分裂,最终导致逻辑连续的数据存放到不同物理磁盘块位置,导致区间查询效率下降

LSM Tree
  • LSM(Log-Structured Merge),LevelDB,RocksDB,HBase,Cassandra等都是基于LSM结构

  • HDD,SSD顺序读写的速度都高于随机读写,写入日志就是顺序写

  • WAL,memtable,sstable

  • 有利于写,不利于读,先从memtable查找,再到磁盘所有的sstable文件查找

  • Compaction的目的是减少sstable文件数量,缓解读放大的问题,加速查找可以对sstable文件使用布隆过滤器

  • Compaction策略

  • STCS(SIze-Tiered Compaction Strategy)空间放大和读放大问题

  • LCS(Leveled Compaction Strategy)写放大问题

  • Compaction会引入写放大问题,在Value较大时采用KV分离存储缓解写放大

  • 写操作多于读操作时,LSM树有更好的性能,因为随着insert操作,为了维护B+树结构,节点分裂。读磁盘的随机读写概率会变大,性能会逐渐减弱。LSM树相比于B+树,多次单页随机写变成一次多页随机写,复用了磁盘寻道时间,极大提高写性能。不过付出代价就是放弃部分读性能。

数据访问


相同之处:数据以表的模型进行逻辑组织,应用对数据进行增删改查

不同之处:MySQL的SQL功能更丰富:事务能力更强,HBase既可以用APIl进行更灵活、性能更好的访问,也可以借助Phoenix使用标准sQL访问;只支持单行事务。推荐:Java进阶视频资源

HBase的特色功能–TTL

3106d9a35aac966842e0e7ab4a8bfd77.png

HBase的特色功能—多版本

16bfbb0aea76345982ad492ce0223299.png

HBase的特色功能—多列簇

a63b5b750f05e5e8b494be091eeb8f4c.png

HBase的特色功能—MOB

e1a5df529f7c3ed983c6349fd91903a2.png

从生态看差异


MySQL:满足APP的在线数据库存储,一般有我足矣

e2d420398879afa3ab86a95a08fd8844.png

大数据圈:应用于大数据场景的存储、计算及管理组件

4dd59fbdbbc549e593d9ef0285ba87ae.png

  • MySQL:一般可独立满足在线应用的数据存储需求,或者与少量组件配合(如缓存、分库中间件)

  • HBase:一般需要和较多大数据组件一起配合完成应用场景,场景架构的设计、实施存在较大的挑战

总结

1d0fe5ab5a8f9e50035d9a4b15e835dd.png

哪些场景的存储适合HBase ?

284bc240b76cde7713b8be5b5eb80538.png d4ffd1f82abee3df06402e723a455196.png 8d7ce87ade8b28b2b854f5a2e700a6e2.png 1ec82656714821083160be6fc613cc2f.png 5ab7b3869ccb94efa7ce6777b414721e.png 57f9bcff76ae6959a14dc2bfc1f2fb78.png 60d708aed214177d5426c8f5c8b4371a.png 7d380d29ef5ac40ff7ac45b7c2fe3ff6.png 8f1f9a80a8bdc89eb4f812c07fbfb0c8.png 61d6a073f30488d8112bde50d4178e79.png 079fda4d71a178d22bb9d65e01cc9356.png

HBase不是MySQL的替换,HBase是业务规模及场景扩张后,对MySQL的自然延伸

50e2ecd7c21b5df6d29b51bd6b51d6c4.png

(感谢阅读,希望对你所有帮助)

来源:blog.csdn.net/weixin_41605937/

最后

image.png

img.cn/img_convert/50e2ecd7c21b5df6d29b51bd6b51d6c4.png)

(感谢阅读,希望对你所有帮助)

来源:blog.csdn.net/weixin_41605937/

最后

[外链图片转存中…(img-xzExQ5Kd-1714786185347)]

本文已被CODING开源项目:【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码】收录

  • 22
    点赞
  • 10
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值