HBase源码分析之org.apache.hadoop.hbase.catalog包

最新推荐文章于 2022-06-03 15:35:46 发布
最新推荐文章于 2022-06-03 15:35:46 发布
阅读量2.1k 收藏
点赞数
分类专栏： hbase 源码分析(HBase&Solr&Lucene) HBase存储 文章标签： HBASE 源码分析
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yangbutao/article/details/8867697
版权

org.apache.hadoop.hbase.catalog

CatalogTracker：主要是对-ROOT和-META表的跟踪，验证他们的有效性，可以获得到-ROOT和-META region的连接；
通过start和stop方法，开启和关闭了对zookeeper中  root-region-server 节点、 unassigned节点中的META 表的region的变化的通知跟踪的服务（RootRegionTracker、MetaNodeTracker）
其中unassigned的子节点表示未分配的region(HMaster启动后，扫描HDFS中ROOT，META表，把所有的region放在这个节点下，待分配)，
当region从该节点删除后，自动的进行通知。
MetaEditor：主要是往META表更新region以及分配的信息
MetaReader：META表的数据读取接口
杨步涛的博客
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
hbase-2.4.11-bin.tar.gz
04-19
https://dlcdn.apache.org/hbase/2.4.11/ hbase-2.4.11 稳定版安装部署包
Hbase中的Catalog表
buptwuzbin的专栏
04-19 1311
[b][i]-ROOT-表[/i][/b] -ROOT-表用来纪录.META.表的region信息。Schema如下： Key: .META. region key (.META.,,1) Value: * info:regioninfo, region的相关信息，startkey，endkey等。 * info:server...
HBase Catalog Tables (region定位原理)
JacksonKing的专栏
10-11 374
导读：0.96版本的hbase之前，在定位region时会使用-ROOT-和.META.表，hbase0.96版本后删除了root 表。 咱们先分析hbase0.96版本之前的 参考hbase官网0.94版本：Hbase Catalog Tables 译自：-ROOT- HBase and.META. table structure 在HBase中，大部分的操作都是在RegionServ...
Hbase-之元数据解读-catalog table(hbase:meta)
shufangreal的博客
11-12 1953
Hbase源数据解读catalog table Hbase的catalog table存在在Hbase系统中的hbase:meta表中（之间叫.META.），但是该表对Hbase shell是不可见的，但是实际上，它和其它的表没有任何区别。 Hbase:meta表的存储路径会被存储在Zookeeper的hbase节点下面 1、 hbase:meta的表结构 rowkey的格式为：（table，region‘s startkey，region id） table就是表名 region’s startkey
HBase体系结构01(Catalog Tables)
Oozie123的博客
12-03 1929
目录表hbase:meta存在于HBase表中，在HBase shell中list命令中会过滤掉，但实际和普通表无任何区别。1 -ROOT- -ROOT-表在HBase 0.96后被移除。 -ROOT-表记录.META.表位置(现在叫hbase:meta)，-ROOT-表结构如下：key .MeTA. region key (.META.,,1) Values info:regioninfo (
Apache HBase
ZERO的博客
06-03 592
对Apache HBase 进行的简单分析和学习。
Caused by: org.apache.hadoop.hbase.TableNotFoundException: SYSTEM.CATALOG
SmallScorpion
09-21 2179
不多少下面连接无敌 https://blog.csdn.net/madongyu1259892936/article/details/88599308
【hbase】HBase报错org.apache.hadoop.hbase.NotServingRegionException的解决办法
weixin_42348946的博客
07-18 4227
【hbase】HBase报错org.apache.hadoop.hbase.NotServingRegionException的解决办法 问题起因: 在使用hbase协处理同步es时候,替换协处理器出错,然后使用scan查询hbase出现以下错误 百度查询,有网友说是异常关闭导致的,我确实重启了hbase,也有说是region分裂导致的,但处理办法都差不多,修复一下 解决方法 然后想使用hba...
org.apache.hadoop.hbase.TableNotDisabledException异常解决
大数据梦想家
12-18 7377
        今天在使用JavaAPI操作HBase,当删除数据表时,程序运行报了这个异常。         org.apache.hadoop.hbase.TableNotDisabledException 解决方案也很简单 根据报错...
HBase源码分析之org.apache.hadoop.hbase.master包
云计算、分布式架构、K8S、大数据、机器学习、搜索、推荐、广告
05-15 2408
1、Zookeeperwatcher：在初始化时，把所有的zookeeper上的baseNode下的节点（root-region-server，rs，draining，master，backup-masters，shutdown，unassigned，table，hbaseid，splitlog）都创建了，初始化时不带watch。 在适当的时机，对这些节点创建watcher，监控他们的子节点的变
hbase-2.0.2.3.1.4.0-315-bin.tar.gz
10-11
ambari-2.7.5 编译过程中四个大包下载很慢，所以需要提前下载，包含：hbase-2.0.2.3.1.4.0-315-bin.tar.gz ，hadoop-3.1.1.3.1.4.0-315.tar.gz ， grafana-6.4.2.linux-amd64.tar.gz ，phoenix-5.0.0.3.1.4.0-315....
HBase（hbase-2.4.9-bin.tar.gz）
01-10
就像Bigtable利用了Google文件系统（File System）所提供的分布式数据存储一样，HBase在Hadoop之上提供了类似于Bigtable的能力。HBase是Apache的Hadoop项目的子项目。HBase不同于一般的关系数据库，它是一个适合于非...
hbase-2.2.6-bin.tar.gz
10-28
就像Bigtable利用了Google文件系统（File System）所提供的分布式数据存储一样，HBase在Hadoop之上提供了类似于Bigtable的能力。HBase是Apache的Hadoop项目的子项目。HBase不同于一般的关系数据库，它是一个适合于非...
hbase的hbase-1.2.0-cdh5.14.2.tar.gz资源包
07-14
hbase的hbase-1.2.0-cdh5.14.2.tar.gz资源包
关于几种压缩算法以及hadoop和hbase中的压缩配置说明
热门推荐
云计算、分布式架构、K8S、大数据、机器学习、搜索、推荐、广告
01-06 2万+
Hadoop中常用的压缩算法有bzip2、gzip、lzo、snappy，其中lzo、snappy需要操作系统安装native库才可以支持 下面这张表，是比较官方一点的统计，不同的场合用不同的压缩算法。bzip2和GZIP是比较消耗CPU的，压缩比最高，GZIP不能被分块并行的处理；Snappy和LZO差不多，稍微胜出一点，cpu消耗的比GZIP少。 通常情况下，想在CPU和IO之间取得平衡的
Hbase和solr在海量数据查询中的应用
云计算、分布式架构、K8S、大数据、机器学习、搜索、推荐、广告
12-21 1万+
对于历史数据的查询，在数据规模不大的情况下，可以用传统的关系型数据库，如oracle,mysql等，可以利用他们提供的索引功能，实现高效的查询。 但是当数据上升到一定规模后，用传统的关系型数据库就不太合适了，当然可以把数据存到分布式数据库HBase中。 HBase目前只支持对rowkey的一级索引，对于二级索引还不支持，当然可以把所有要索引的字段都拼接到rowkey中，根据hbase的filt
HBase的hbase.rpc.timeout参数引起的问题
云计算、分布式架构、K8S、大数据、机器学习、搜索、推荐、广告
02-25 1万+
在高并发压力测试时，发现对一个reginserver做scan操作的时，regionserver中偶尔会输出下面的错误： 2013-02-21 09:50:33,328 WARN org.apache.hadoop.ipc.HBaseServer: IPC Server listener on 60020: readAndProcess threw exception java.io
HBase数据备份恢复的几种机制总结
云计算、分布式架构、K8S、大数据、机器学习、搜索、推荐、广告
10-21 1万+
1、  replication， 通过类似mysql 主从复制方式进行复制，基于HLog 在应用场景个人感觉比较重要的一点是可以隔离计算分析型的操作和实时性操作带来的影响。 对于DDL操作不做复制，过实时读取hlog中的entry来解析变更的数据然后发送到从集群中去。       2、  distcp， 表数据文件的copy ./hadoopdistcp  hdfs://w
org.apache.hadoop.hbase.regiontoobusyexception: org.apache.hadoop.hbase.regi
最新发布
12-06
onTooBusyException是HBase中的一种异常类型，表示region服务器过于繁忙无法处理请求。在HBase中，数据存储在多个region中，当某个region服务器负载过高，无法处理更多的请求时就会抛出这个异常。 造成region服务器...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值