Hbase寻址机制

最新推荐文章于 2024-05-07 19:36:35 发布
最新推荐文章于 2024-05-07 19:36:35 发布
阅读量6k 收藏 11
点赞数 2
分类专栏： Hbase 文章标签： hbase 结构
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_41455420/article/details/79546367
版权
本文详细介绍了HBase的寻址机制，包括寻址示意图、-ROOT-和.META.表结构以及寻址流程。在寻址流程中，首先通过ZooKeeper找到-ROOT-表，再由-ROOT-表获取.META.表的位置，然后在.META.表中查找目标数据所在的Region。系统使用类似B+树的三层结构确保高效定位。总结了Region定位的关键步骤，强调了缓存对于提升效率的重要性。
摘要由CSDN通过智能技术生成

Hbase寻址机制

1、寻址示意图

这里写图片描述

2、-ROOT-和.META.表结构

-ROOT-表结构

这里写图片描述

.META.行记录结构

这里写图片描述

3、寻址流程

现在假设我们要从Table2里面查询一条RowKey是RK10000的数据。那么我们应该遵循以下步骤：
1. 从.META.表里面查询哪个Region包含这条数据。

最低0.47元/天 解锁文章
Running_Tiger
关注
专栏目录
Hbase寻址(2)
moonbis的博客
03-14 823
读写过程 读请求过程： （1） 客户端通过zookeeper以及root表和meta表找到目标数据所在的regionserver （2）联系regionserver查询目标数据 （3）regionserver定位到目标数据所在的region，发出查询请求 （4）region先在memstore中查找，命中则返回 （5）如果在memstore中找不到，则在storefile中扫描（可能会...
HBase寻址方式
weixin_42130191的博客
06-11 345
寻址机制 -ROOT-表：其位置存储在 ZooKeeper 中，此表存储.META.的位置信息，并且-ROOT不会分裂，只有一个 Region。而.META.表可以被切分成多个 Region。 .META.表：存储表数据 region 的位置信息，每张表每个 Region 的起始 RowKey。 两个版本，HBase-0.96 之前和 HBase-0.96 之后 HBase-0.96 之前： 1. Client 请求 ZooKeeper 获得-ROOT-所在的 RegionServer...
Hbase的寻址机制
qq_48750919的博客
10-31 1615
Hbase的寻址机制 客户端访问Hbase，进行读取表中数据或者向表中写入数据时，会进行寻址操作，然而Hbase的逻辑存储单元是region，所以Hbase的寻址操作就是寻找指定表的的region。 大致流程如下： 如果客户端发送了一个查询语句：get 'mydb:student','0002'; （1）第一步，会先访问zookeeper，来获取meta表的位置 （2）第二步，访问meta表，在其中找到mydb:student表对应的region名称和位置信息 （3）第三步，通过region的名
HBase的寻址机制
lv_hulk的博客
02-12 1535
HBase的寻址机制 （一）寻址示意图 （二）-ROOT-和.META.表结构 .META.行记录结构 （三）老的 Region 寻址方式 在 HBase-0.96 版本以前，HBase 有两个特殊的表，分别是-ROOT-表和.META.表，其中-ROOT-的位置存储在 ZooKeeper 中，-ROOT-本身存储了.META. Table 的 RegionInfo 信息，并且-ROOT-不...
【大数据技术Hadoop+Spark】HBase分布式数据库架构、特点、数据存储方式、寻址机制详解（图文解释）
showswoller的博客
12-16 1765
【大数据技术Hadoop+Spark】HBase分布式数据库架构、特点、数据存储方式、寻址机制详解（图文解释）
hbase寻址机制详解
05-27
HBase的寻址机制主要是通过行键分片实现的。HBase将所有的数据按照行键进行排序，并将数据划分成若干个连续的区间，每个区间对应一个HRegion。当客户端需要访问某个数据时，它会首先计算出该数据所属的区间，然后...
HBase寻址机制及HMaster、RegionServer容错
大数据学习与分享的博客
07-07 490
HBase寻址机制 HBase提供了两张特殊的目录表-ROOT-和META表，-ROOT-表用来查询所有的META表中region位置。HBase设计中只有一个root region即root region从不进行切分，从而保证类似于B+树结构的三层查找结构： 第1层：zookeeper中包含root region位置信息的节点，如-ROOT-表在哪台regionserver上 第2层：从-ROOT-表中查找对应的meta region位置即.META.表所在位置 第3层：从META表中查找用户表对应re
HBase 底层原理（系统架构、物理存储、寻址机制、读写过程、主从节点工作机制）
weixin_44387652的博客
03-17 725
HBase 底层原理（系统架构、物理存储、寻址机制、读写过程、主从节点工作机制）1、系统架构2、物理存储2.1、整体物理结构2.2、StoreFile 和 HFile 结构2.3、MemStore 和 StoreFile2.4、HLog(WAL)3、寻址机制3.1、老的 Region 寻址方式3.2、新的 Region 寻址方式4、读写过程4.1、读请求过程4.2、写请求过程5、RegionServer 工作机制6、Master 工作机制 1、系统架构 每一个 RegionServer 就只有一个 HLo
HBase的寻址机制中，Zookeeper中存储的是什么的数据。
06-09
在 HBase 的寻址机制中，Zookeeper 中存储的是 HBase 集群的元数据信息，包括了 HBase 表的结构信息、RegionServer 的负载信息、HBase 集群的状态信息等。具体来说，Zookeeper 中存储的是以下几类数据： 1. HBase ...
HBASE的寻址机制和存储机制
u013111855的博客
10-24 880
HBASE的寻址机制寻址机制读机制写机制 寻址机制 现在假设我们要从 user_info 里面寻找一条 RowKey 是 rk0001 的数据。那么我们应该遵循以 下步骤： 从.META.表里面查询哪个 Region 包含这条数据。 获取管理这个 Region 的 RegionServer 地址。 连接这个 RegionServer，查到这条数据。 系统如何找到某个 RowKey (或者某个 R...
Hbase的读写寻址过程
UnionIBM的博客
05-10 2538
1.Hbase的写入流程客户端查找对应region 客户端根据要操作rowkey，查找rowkey对应的region。查找region的过程为通过zk获取到hbase:meta表所在region。通过查找hbase:meta可以找到要更新的表每个region的startkey、endkey以及所处机器。由于hbase的rowkey有序分布在region上，所以通过每个region的startkey...
Hbase读写流程和寻址机制
u010766519的博客
06-18 415
写操作流程 (1) Client通过Zookeeper的调度，向RegionServer发出写数据请求，在Region中写数据。 (2)数据被写入Region的MemStore，直到MemStore达到预设阈值。 (3) MemStore中的数据被Flush成一个StoreFile。 (4)随着StoreFile文件的不断增多，当其数量增长到一定阈值后，触发Compact合并操作，将多...
Zookeeper在Hbase中的工作原理和三次寻址详解
Peter_Changyb的博客
07-30 2247
Zookeeper原理介绍 Zookeeper是一个开放源码的分布式集群协调器，主要用于解决分布式应用中的统一命名服务、状态同步服务、集群管理、配置项管理等问题。HBase安装包中含有内置ZooKeeper，也可以使用独立安装的ZooKeeper。主要有如下作用： 解决HMaster的单点故障问题： Hbase中可以启动多达10个HMaster，通过ZooKeeper的Master Electi...
Hbase的寻址操作
在路上的博客
09-22 591
Hbase的寻址操作 早期的寻址操作 三层跳转 Hbase如何找到某个rowkey所在的region？早期的Hbase使用三层类似B+树(LSM数)的结构来保存region位置。 -root- —> .meta. --> region Region： 就是你要查找的数据所在的Region。不多 .meta.: 是一张元数据表，存储了所有Region的简要信息。.meta.表中的...
Hbase的存储机制和寻址机制
murphyZ的博客
03-08 565
1、Hbase中存在一个叫做列簇的概念，一个列簇下面保存多个列,所谓的列簇指的就是一组列 2、Hbase中没有主键的概念，但是存在行键的概念（rowkey）,可以把行键理解为主键，一条记录的唯一标识 3、版本：version 用于标识更新的数据 ，也可以作为数据的检索项 4、最小的存储单元cell单元格 5、在进行检索数据的时候，可以通过 以下方式进行单元格数据的唯一确定 6、cell单元格格...
HBASE
ThreeAspects的博客
05-17 2468
HBASEHBASE与关系型数据库HBASE表结构HBASE集群架构及表存储机制HBASE基本语法 HBASE与关系型数据库   Oracle、MySQL和HBASE比较：Oracle和MySQL是传统的关系型数据库，优势在于处理复杂的表与表之间的关系，进行各种复杂的关系查询。HBASE是没有表关联的，不提供表的关联查询，它对于这种关系的处理是不擅长的，属于NoSQL的范围，只适合做简单的查询，基...
大数据技术原理与技术简答
最新发布
weixin_64881847的博客
05-07 818
1、HDFS中名称节点的启动过程当要访问数据时，客户端首先在自己的缓存中查找是否有所需region的位置信息，若有则直接前往访问，若没有则三级寻址：首先访问 ZooKeeper，获取-ROOT表的所在Region服务器的位置信息，然后访的-ROOT-表，获得.META.表所在Region服务器的信息，接着访问.META.表，找到所需的 Region 具体位于哪个 Regio服务器，最后到该 Region 服务器读取数据。**读写数据：读：先在memstore查找，没有找到再去storefile查找。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值