假如用hadoop0.20.203版本,hbase会提示hdfs不支持append特性而可能会导致数据丢失,而且事实上,这种情况在我们系统中已经遇到,在写数据的时候,rs挂掉,数据丢失。 暂时准备把hadoop迁移到cdh3u3上, 因为是不同版本之间的迁移,所以只能用hftp,
./hadoop distcp hftp://server1:50070/hbase/test hdfs://server1:9011/hbase/test 从前面拷到后面, 同时加入还需要迁移hbase的话,可以把保存在hdfs上的文件全部拷到新的集群中,然后执行./hbase org.jruby.Main add_table.rb /hbase/xxx ,将表加入到meta中,当然这个是要重新启动hbase的。
./hadoop distcp hftp://server1:50070/hbase/test hdfs://server1:9011/hbase/test 从前面拷到后面, 同时加入还需要迁移hbase的话,可以把保存在hdfs上的文件全部拷到新的集群中,然后执行./hbase org.jruby.Main add_table.rb /hbase/xxx ,将表加入到meta中,当然这个是要重新启动hbase的。