Hadoop集群间HBase数据迁移

背景:HBase Cluster1 -> HBase Cluster2
【利用HBase的Snapshots功能,进行集群之间的HBase数据前移】

1.开启Snapshots功能(0.95及以上版本默认开启了)
 <property>
    <name>hbase.snapshot.enabled</name>
    <value>true</value>
</property>
2. 创建Snapshot(在Cluster1上操作)
$ hbase shell
hbase> snapshot 'myTable', 'myTableSnapshot-122112'
3. 执行迁移
3.1 推式(在Cluster1上操作)
$ hbase org.apache.hadoop.hbase.snapshot.ExportSnapshot -snapshot MySnapshot -copy-to
hdfs://cluster1:8020/hbase_root_dir -mappers 16
3.2 拉式(在Cluster2上操作)
$ hbase org.apache.hadoop.hbase.snapshot.ExportSnapshot -snapshot MySnapshot -copy-from hdfs://cluster1:8020/hbase_root_dir 
-copy-to hdfs://cluster2:8020/hbase_root_dir -mappers 16
4. 恢复数据(在Cluster2上操作)
$ hbase shell
hbase> restore_snapshot 'myTableSnapshot-122112'
https://docs.hortonworks.com/HDPDocuments/HDP2/HDP-2.3.4/bk_hbase_snapshots_guide/content/ch_hbase_snapshots_chapter.html
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值