如何像海豚一样在数据海洋里遨游?|Hbase数据处理流程详解

本文详细介绍了Hbase的数据处理流程,包括数据的写入、读取、flush和合并。Hbase是大数据生态中的重要组成部分,适合存储海量数据。在数据写入时,数据会写入Hlog和memstore。读取时,先从MemStore和BlockCache查找,然后从StoreFile读取。flush操作在MemStore占用内存超过阈值时触发,而数据合并则能优化读取性能,分为小合并和大合并。理解这些流程对深入理解Hbase至关重要。
摘要由CSDN通过智能技术生成

写在前面:我是「且听风吟」,目前是某上市游戏公司的大数据开发工程师,热爱大数据开源技术,喜欢分享自己的所学所悟,现阶段正在从头梳理大数据体系的知识,以后将会把时间重点放在Spark和Flink上面。

如果你也对大数据感兴趣,希望在这个行业一展拳脚。欢迎关注我,我们一起学习。博客地址:https://ropledata.blog.csdn.net

博客的名字来源于:且听风吟,静待花开。也符合我对技术的看法,想要真正掌握一门技术就需要厚积薄发的毅力,同时保持乐观的心态。

你只管努力,剩下的交给时间!

图片

一、前言

Hbase作为咱们大数据生态里必不可少的一环,它的重要性不言而喻。官方对它的解释是Hbase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,在极易扩展的前提下,它还适合存储PB级别的海量数据,并且能在几十到百毫秒内返回数据。

Hbase的logo是海豚的形象,寓意在大数据的海洋里穿梭遨游。事实上数据的处理流程一直都是Hbase

  • 47
    点赞
  • 23
    收藏
    觉得还不错? 一键收藏
  • 60
    评论
评论 60
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值