hbase meta目录_HBase 出现RIT处理方式

最新推荐文章于 2023-05-12 16:34:34 发布
最新推荐文章于 2023-05-12 16:34:34 发布
阅读量510 收藏
点赞数
文章标签： hbase meta目录
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_32304579/article/details/113491228
版权
本文介绍了HBase中Region-In-Transition（RIT）的概念，当RIT发生时，可能是由于数据丢失、HDFS表目录被删除或meta信息丢失导致。解决RIT问题包括恢复HDFS表目录、删除对应meta信息以及清理日志文件。通过HBase shell进行一系列操作可以有效处理RIT状态。
摘要由CSDN通过智能技术生成

什么是RIT

RIT(Region-In-Transition)，是Region变迁机制，实际上是指在一次特定操作行为中Region状态的变迁。

f4b3a242f90888631236526aee578e17.png

RIT在hbase中展现

出现RIT原因

  • 数据丢失，通过日志找不回来
  • 删除了HDFS的表目录
  • 删除了hbase.meta对应的表信息

解决方案

c87e5dbc7bed7e5367ae8587c40bd9d3.png

HDFS hbase表目录

  • 如上图，先找到HDFS对应的HBase的表目录，执行
    hdfs dfs -rm -r /hbase/data/default/test
    删除hbase对应的hdfs的文件
  • 找到test表对应的hbase meta信息，进入到hbase shell中执行
    scan 'hbase
最低0.47元/天 解锁文章
真的是单大宝
关注
HBASE1.2的RIT(一)--RIT原理及产生
峰的记忆
04-25 1373
1.什么是RIT RIT实际上是指在一次特定操作行为中Region状态的变迁. 既然是状态变迁，也是就是说rit本身是一个状态转移的正常行为。 下面会分别围绕RIT红色的词进行详细解释： 1.特定操作行为是指哪些操作？ 2.Region的状态有哪些？ 2.导致RIT操作 既然RIT指在一次特定操作行为中Region状态的变迁，特定操作行为是指什么呢？ ...
记录一次HBase2.x之RIT问题解决方案
徐雄辉笔记
11-18 1727
1 问题描述 Region-In-Trasition机制 从字面意思来看，Region-In-Transition说的是Region变迁机制，实际上是指在一次特定操作行为中Region状态的变迁，例如merge、split、assign、unssign等操作。RIT问题指的是在RIT过程中出现了异常情况，然后导致region的状态一直保持在RIT，使得HBase出现异常。 2 ...
hbase RIT常用解决办法
wflh323的专栏
06-01 4603
相信维护过hbase的人都遇到过table进入RIT状态，RIT状态都是hbase管理者不愿意见到的。RIT是什么？可以看下这篇文章：https://www.jianshu.com/u/ad4d39659223,介绍的很详细。 一般遇到hbase table 进入RIT怎么解决： 1.当在hbase webui看到某个表某个regin进入RIT时，可以重启该regin所在节...
由于在hadoop删除数据导致hbase进入RIT
tiyager的博客
07-30 279
hbase shell下删除对应的数据 deleteall 'hbase:meta','tableName,8866A2342D24DFD22714D55675FEC4D7750EC3521AB4CE9A-1591613447000,1595774766555.995346d5a2bbf04857ad74d800bcc8f2.'
HBase实践 | HBase RIT问题排查思路
Focus on Lakehouse
03-13 968
HBCK - HBCK检查什么？(1) HBase Region一致性集群中所有region都被assign，而且deploy到唯一一台RegionServer上该region的状态在内存...
Hbase-之在线Region Merge
shufangreal的博客
11-30 441
Hbase-之在线Region Merge Hbase支持手动与自动Region的Splitting，而且又很完善的策略与算法，虽然Hbase支持Region之间的Merge操作，但是还在继续完善中，目前只能支持手动的Merge； Hbase的Region Merge操作与Splitting操作不一样，因为Merge操作需要HMaster、HRegionServer的共同参与，整个Merge的操作流程如下： 1）Client发送Merge的RPC请求到HMaster； 2）然后Master将Regions
Apache HBase 问题排查思路
Hadoop技术博文
09-07 625
本文来自于中国 HBase 技术社区在杭州举办的第三次 HBase Meetup 会议，第四次 HBase Meetup 会议将于本周六（2018-09-08）在上海举办...
HBase RIT问题处理
qq_35542970的博客
12-29 3350
问题： 最近发现HBase集群出现1W+ 的region处于RIT状态，导致很多hbase集群处于不可用状态。 HBase版本： 2.0.1 问题定位： 1、刚开始以为只是单纯超时等导致的RIT，于是通过脚本手动修改meta表状态（ING->CLOSED），再滚动重启hbase regionserver和master服务，最后批量assign，结果发现RIT情况并没有解决。（没有hbck工具，只能手动搞） 2、手动assign ‘region’提示超时。大量的assign操作的proced
HBase2.x之RIT问题解决.docx
11-06
在RIT过程中，可能会出现异常情况，从而导致Region的状态一直保持在RIT，使得HBase出现异常。 解决RIT问题需要从多方面入手，下面是四种解决方案： 方案一：检查HDFS的健康度 首先，需要检查HDFS的健康度，是否有...
HBase 2.0.0 META 数据修复工具
小强的博客
12-10 5287
必须先吐槽一下 Cloudera 6.x 和 Hbase 2.0 太坑了！ 不久前生产上的一套Hbase集群出现著名的RIT（Regions in Transition）问题。 查看hbase web ui 于是通过hbck命令查看一下集群状态，果然好多inconsistency ... ERROR: Region { meta => XXX,XXX:,157301923100...
hbase 预写日志_Hbase要掌握的内容
weixin_39715538的博客
12-18 525
WAL意为write ahead log，HBase中的预写日志，用来做灾难恢复使用，底层实现是HLog，HLog记录数据的所有变更。使用WAL的原因：因为MemStore存储的数据是驻留在内存中的，是不稳定的(比如宕机时)，所以采用了WAL预写日志来解决这个问题。(运行MApReduce作业时，可以通过关闭WAL功能来获得性能的提升——setWriteToWAL(boolean))其实HLog文...
HBase中的RIT机制(Region in Transcation)
01-16 8341
每天到公司第一件事，就是检查测试环境和线上环境的几个hbase集群运行状态。由于测试环境用的几台机器都是虚拟机，因此不可避免的很容易出现regionserver宕机的情况。每次对于宕机的regionserver重启后的一段时间内，部门里的其他一些需要调用hbase的开发人员就开始抱怨，hbase 客户端连接错误 超时等等各种抱怨，其实也是因为regionserver 启动后，本身会进行一次 RIT
hbase的RIT异常处理
weixin_45512368的博客
07-07 2384
hbase的RIT异常处理
hbase表出现RIT删除方案
张不帅
05-12 942
/zkCli.sh -server node2:2181 --node2为仿真节点，生产需改。deleteall ‘hbase:meta’,‘表名’,‘table:state’hadoop dfs -rm -r /hbase/data/default/表名。6. 删除 /hbase/MasterProcWALs 目录。deleteall /hbase/table/表名。3.删除hbase:meta对应表信息。1）echo所有表的元数据信息。
Hbase写入量大导致region过大无法split问题
热门推荐
bluekeyv的专栏
02-10 1万+
最近在线上往hbase导数据，因为hbase写入能力比较强，没有太在意写的问题。让业务方进行历史数据的导入操作，中间发现一个问题，写入速度太快，并且业务数据集中到其中一个region，这个region无法split掉，处于不可用状态。这里描述一整个过程——         事情的起因：业务方按照userid和商品id作为rowkey前缀，并没有进行hash散列。我当时咨询过业务方，认为：1.
hbase merge regions
xiao_jun_0820的专栏
05-09 4204
今天对一个表进行预分区然后导入数据
HBase学习笔记（二）HBase架构
momo1005的博客
10-24 524
HBase Architectural Components（HBase架构组件）HBase架构也是主从架构，由三部分构成HRegionServer、HBase Master和ZooKeeper。RegionServer负责数据的读写与客户端交互，对于region的操作则是由HMaster处理，ZooKeeper则是负责维护运行中的节点。在底层，它将数据存储于HDFS文件中，因而涉及到HDFS的NN
HBASE1.2的RIT(三)--RIT产生详解2
峰的记忆
04-26 1092
本章接着讨论，hbase的其他DDL操作，怎么样影响Region的状态变迁，产生RIT
HBase：Meta表详解
weixin_42241438的博客
12-14 5947
Meta的必要性： HBase一张表的数据是由多个Region构成，而这些Region是分布在整个集群上的RegionServer上的。那么客户端在做任何数据操作时，都要确定数据在哪些Region上，然后再根据Region和RegionServer的对应关系，去相应的RegionServer中读取数据。 hbase：meta就是专门用来存储和Region相关的信息，这里的hbase表示namespace，meta是系统表，因此用全局统一的命名空间； ...
hbase配置bash_profile
最新发布
08-18
export HBASE_HOME=/path/to/hbase export PATH=$PATH:$HBASE_HOME/bin ``` 请将`/path/to/hbase`替换为你实际安装HBase的路径。 3. 保存并关闭文件，然后运行以下命令使更改生效： ``` source ~/.bash_profile ```...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值