HBase迁移数据方案(两个集群不能通信)

HBase迁移数据方案(两个集群不能通信)

把某个表(test)从集群1迁移到集群2(两个集群互相看不见),步骤如下:

(其实就是把旧集群上的hbase在hdfs上的存储文件迁移到新集群上)

1.把数据表test从hbase下拷出
hadoop fs -get /hbase/data/default/test /home/
2.文件放到新集群的系统上。
3.文件拷入新的hadoop集群hbase下
hadoop fs -put test /hbase/data/default/test
4.到hbase shell下list,可以看到test表已经存在,但是你scan的时候出现错误:
TABLE
test
1 row(s) in 0.0220 seconds

hbase(main):062:0> scan 'test'
ROW                                        COLUMN+CELL

ERROR: Unknown table test!

错误很容易理解:你只是把表放进内存,但是hbase并不清楚他的结构,也不知道有数据放进去,根据经验,这需要执行一些东西来让hbase与这些数据联系

5.先修复.META.表:
hbase hbck -fixMeta

==注意执行此命令需要hdfs上/hbase下的写权限==

这样scan’.META.’就能发现里面有test的信息,在执行scan,查看。
(网上很多版本说通过一个add_table.rb来实现,但是我的hbase下没有这个,所以尝试其他方式。)

6.如果依然失败(重新分区):
hbase hbck -fixAssignments
7.再执行scan应该没有问题了。
  • 1
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值