hadoop hbase中的root表和meta 简述

最新推荐文章于 2024-09-11 15:45:19 发布
最新推荐文章于 2024-09-11 15:45:19 发布
阅读量1.5k 收藏 1
点赞数
分类专栏： hbase 文章标签： hadoop hbase中的root表和meta 简述
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zengxianglei/article/details/100042321
版权
本文简述了Hadoop HBase中的ROOT表和META表的角色。ROOT表作为简表，主要存储META表的位置信息，而META表详细记录所有HRegion详情。此外，文章还探讨了HBase的HDFS目录结构、WAL日志、RegionServer的工作原理以及数据存储格式。
摘要由CSDN通过智能技术生成

hadoop hbase中的root表和meta 简述

在这里插入图片描述

在这里插入图片描述

总结
　　ROOT表可以看作是一张简表，简单的信息，记录不是很多，但ROOT表记录了META的信息。
　　META表可以看作是一张详表，记录了所有HRegion的信息。ROOT表也记录了HRegion表的信息，但没META表记录详细。

拓展：
HBase表的HDFS目录结构如下
/hbase
/data
/ (集群里的Namespaces)
/

(该集群的Tables)
/ (该table的Regions)
/ (该Region的列族)
/ (该列族的StoreFiles)

HLog的HDFS目录结构如下
/hbase
/WALs
/ (RegionServers)
/ (WAL files for the RegionServer)
在这里插入图片描述

一个RegionServer上存在多个Region和一个HLog读写实例。


HLog的就是WAL(Write-Ah

最低0.47元/天 解锁文章
zengxianglei
关注
专栏目录
Hadoop HBase数据库简介
01-07
HBase 和传统关系数据库不同，它采用了 BigTable 的数据模型增强的稀疏排序映射表（Key/Value ），其中，键由行关键字、列关键字和时间戳构成。 HBase 提供了对大规模数据的随机、实时读写访问。HBase 的目标是存储...
HBase -ROOT-和.META.表结构
张勤一
11-24 1369
在HBase中，大部分的操作都是在RegionServer完成的，Client端想要插入，删除，查询数据都需要先找到相应的RegionServer。什么叫相应的RegionServer？就是管理你要操作的那个Region的RegionServer。Client本身并不知道哪个RegionServer管理哪个Region，那么它是如何找到相应的RegionServer的？本文就是在研究源码的基础上揭秘
-ROOT-表和.META.表结构详解
dbbaq24022的专栏
08-15 283
在《HBase技术简介》中我们知道，HBase中有两个特殊的表：-ROOT-和.META.。 由于HBase中的表可能非常大，故HBase会将表按行分成多个region，然后分配到多台RegionServer上。数据访问的整个流程如下图所示： 注意两点： Client端在访问数据的过程中并没有涉及到Master节点，也就是说HBase日常的数据操作...
Hbase介绍
最新发布
似水_逆行的博客
09-11 307
Hbase
Hbase Meta表基本介绍
JY_He的博客
04-01 7562
Hbase有一个叫做Meta的特殊的目录表，用于保存集群中regions的位置信息（region列表）。ZooKeeper存储着Meta表的位置。 Hbase Meta结构如下： 具体含义： rowKey:([table],[region start key],[region id]) column family：info column：regioninfo、server、se...
Hbase meta表介绍
C_time的博客
10-22 3140
HBase meta表介绍 本文转载自 https://www.jianshu.com/p/ea7e03cfbfe0 1.hbase0.98之后，hbase就废弃了ROOT**表，仅保留meta表 2.meta表不允许split 在网上较多的文章都会介绍hbase的两个关键表ROOT表与meta表。 其实在hbase0.98之后，hbase就废弃了ROOT表，仅保留meta表（还有namespa...
HBase中的Client如何路由到正确的RegionServer
Make Progress Everyday!
04-13 2393
HBase中的Client如何路由到正确的RegionServerPosted onJuly 27, 2010byHarry_Ding<br />在HBase中，大部分的操作都是在RegionServer完成的，Client端想要插入，删除，查询数据都需要先找到相应的RegionServer。什么叫相应的RegionServer？就是管理你要操作的那个Region的RegionServer。Client本身并不知道哪个RegionServer管理哪个Region，那么它是如何找到相应的RegionServe
HBase - ROOT 和 META 表结构 (region定位原理)
tianyeshiye
06-12 1760
1. HBase读写流程 上图是RegionServer数据存储关系图。上文提到，HBase使用MemStore和StoreFile存储对表的更新。数据在更新时首先写入HLog和MemStore。MemStore中的数据是排序的，当MemStore累计到一定阈值时，就会创建一个新的MemStore，并且将老的MemStore添加到Flush队列，由单独的线程Flush到磁盘上，成为一个Sto...
Hadoop 中 HBase Shell命令的详解
08-29
Hadoop 中 HBase Shell 命令的详解 Hadoop 中 HBase Shell 命令是 HBase 的一种交互式 Shell，用于与 HBase 进行交互式通信。HBase 使用 Hadoop 文件系统来存储数据，所有的任务都发生在 HDFS 上。HBase Shell 命令...
大数据 hdfs hadoop hbase jmeter
10-23
在IT行业中，大数据处理是当前的关键技术之一，而Hadoop、HDFS和HBase则是其中的核心组件。Hadoop是一个开源框架，主要用于存储和处理大规模数据，而HDFS（Hadoop Distributed File System）是Hadoop的核心部分，是...
hadoop hbase 全jar包
05-21
Hadoop和HBase是大数据处理领域中的重要组件，它们在分布式存储和实时数据访问方面扮演着关键角色。Hadoop是一个开源框架，主要用于处理和存储大量数据，而HBase是建立在Hadoop之上的非关系型数据库，提供高可靠性、...
hadoop中安装hbase及创建表等.docx
10-11
以上就是Hadoop中安装HBase的基本步骤，以及如何使用HBase Shell创建表和插入数据，以及通过Java API进行数据操作。理解并掌握这些基本操作是进行大数据处理和分析的基础。在实际项目中，根据需求，还需要考虑集群...
Hbase源码系列之源码前奏hbase:meta表相关详细介绍
mojolang
04-28 730
一，基本功能介绍 -root-表在HBase 0.9.6以后的版本被移除了。 Hbase 0.9.6以前，三个重要信息： 1，-root-表的位置存储在Zookeeper上(只会存在一个regionserver上)，内容是.meta表的存储信息 2，.meta表存储在一个regionserver上，存储的是用户的表的region信息，用户表越大，这个表的region会越多，进而会分布到不同的regionserver。 3，用户的表信息，用户表示存储在各个regionserver上。 Hbase
hbase:meta 表解析
初阳
04-19 5902
hbase:meta表中存储了Hbase集群中全部表的所有的region信息。 hbase:mate表所在的RegionServer信息被存储到了zk中的/hbase/meta-region-server节点。通过查询该节点，可以获得hbase:meta表在那个RegionServer。 rowkey hbase:meta表的rowkey结构如下： 表名,STARTKEY,创建时间.ha...
三、HBase RegionServer介绍 HLog、MemStore、BlockCache
Shyllin的博客
05-17 1274
HBase RegionServer介绍 HLog、MemStore、BlockCache
Hbase架构
weixin_44909266的博客
01-08 247
Hbase架构     hbase介绍：HBase是一个高可靠性、高性能、面向列、可伸缩、实时读写的分布式数据库。主要用来存储非结构化和半结构化的松散数据。 a.目录表     hbase:meta作为HBase表存在，从HBase shell的list命令中过滤掉，实际上是一个表，保存系统中所有的region的列表...
Hbase“-ROOT-”表和“.META.”表
shen_ting的专栏
05-13 657
Hbase中两张特殊表：-ROOT- & .META. 客户端访问数据的流程： Client -> Zookeeper -> -ROOT- -> .META. -> 用户数据表 Zookeeper中记录了-ROOT-表的location -ROOT- 　  记录.META.表的Region信息，-ROOT-只有一个region，不能被分割。 -ROOT-表
大数据笔记--Hadoop（第二篇）
我睡觉的时候不困
03-11 782
一、HDFS 1、概述 HDFS(Hadoop Distributed File System - Hadoop分布式文件系统)是Hadoop提供的一套用于进行分布式存储的机制 HDFS是Doug Cutting根据Google的论文<The Google File System>(GFS)来仿照实现的 2、特点 能够存储超大文件：在HDFS集群中，只要节点数量足够多，那么一个文件无论是多大都能够进行存储- HDFS会对文件进行切块处理 快速的应对和检测故障：在HDFS集群中，运维.
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值