hbase修复.META.表与HDFS文件不一致问题

在实际环境中遇到hbase fbck检查报hdfs数据块与META表信息不一致的错误。表现就是数据写入无法进行。

      经过检查,发现在.META.表中对应的一些region块的子列少了regioninfo这一列;同时在hdfs的出错region文件夹下查看发现本来该是.regioninfo的文件夹变成了.tmp文件夹。在网上查了些资料,发现是region做分裂的时候失败,导致regioninfo信息丢失,.META.表就无法记录该region的startkey,endkey等信息。

      淘宝发布了两个补丁,来避免这个错误出现。0.90.5版本已经集成了此修改。HBASE-4562,HBASE-4563

     

      但是对于已经发生的错误,如何恢复集群正常使用。有两种方案:

      1、移除异常数据(较容易)

      1)首先,将hdfs上那些不一致的数据库进行删除,或者mv到别的位置

      2)对应的region信息在META表中进行删除

      3)使用hbase merge命令修补删除数据形成的空洞

       最后这一步是引用别人的blog,在此贴出链接:http://blog.csdn.net/a221133/article/details/7085257

      2、恢复数据(社区正在开发中,未有稳定版集成)

       后续如果有相关内容会在此篇日志更新,先mark一下
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值