今天遇到了一个恶心的问题:在HBase里面drop一个表,再重建,结果出错说这个表已经存在。再删,出错说这个表不存在。
在网上找,很多人说是因为.META.表里面残存了僵尸表的信息。但是在hbase shell中scan ".META."之后,没有发现任何问题。
后来找到了这篇文章,解决了问题:
http://arnon.me/2013/01/killing-hbase-zombie-table/
原因是因为zookeeper里面也残留了僵尸表的信息。解决方法:
- hbase zkcli
- ls /hbase/table
- rmr /hbase/table/TABLE_NAME
另外,我发现在/hbase下面还有个table94,貌似是hbase的版本号的样子,里面也有表名,而且僵尸表也在里面,一并干掉。
最后需要重启一下hbase和zookeeper。
http://hortonworks.com/blog/introduction-to-hbase-mean-time-to-recover-mttr/
http://nosql.mypopescu.com/post/51148579363/introduction-to-hbase-mean-time-to-recover-mttr