zookeeper数据迁移

迁移的方式

1.zookeeper自带命令实现数据迁移
2.使用第三方jar实现拷贝迁移

zookeeper原生命令行实现数据迁移

原生命令不需要第三方参与,直接把它的最新数据和日志拷贝到另一台服务器的数据目录下重启即可。

找到服务器上的zookeeper安装路径

ps -ef |grep zookeeper

vi /usr/local/zookeeper-3.4.9/conf/zoo.cfg
datadir=/usr/local/zookeeper-3.4.9/data

查看最新的log和快照数据

cd /usr/local/zookeeper-3.4.9/data/version-2/
 ls -alh
total 182M
drwxr-xr-x 2 hadoop hadoop 4.0K 2019-05-09 11:32:46 .
drwxr-xr-x 3 hadoop hadoop 4.0K 2019-04-04 15:28:26 ..
-rw-r--r-- 1 hadoop hadoop  65M 2019-03-22 05:03:14 log.1
-rw-rw-r-- 1 hadoop hadoop  65M 2019-04-23 14:25:57 log.c9ef4
-rw-rw-r-- 1 hadoop hadoop  65M 2019-04-26 00:38:25 log.d7778
-rw-rw-r-- 1 hadoop hadoop  65M 2019-04-28 04:11:25 log.e61e9
-rw-r--r-- 1 hadoop hadoop  65M 2019-03-25 09:15:15 log.f108
-rw-rw-r-- 1 hadoop hadoop  65M 2019-05-01 10:31:57 log.f32bb
-rw-rw-r-- 1 hadoop hadoop 334K 2019-04-13 15:48:58 snapshot.9b260
-rw-rw-r-- 1 hadoop hadoop 338K 2019-04-15 21:41:25 snapshot.a8baa
-rw-rw-r-- 1 hadoop hadoop 337K 2019-04-26 00:38:25 snapshot.e61e7
-rw-r--r-- 1 hadoop hadoop 174K 2019-03-22 05:03:15 snapshot.f106
-rw-rw-r-- 1 hadoop hadoop 337K 2019-04-28 04:11:25 snapshot.f32b9

把最新的两个文件拷贝到另外的zookeeper服务目录下

[root@yw-os-0002 version-2]# sz log.f32bb 
[root@yw-os-0002 version-2]# sz snapshot.f32b9 

下载到我本地服务数据目录D:\tmp\zookeeper\version-2
备份该目录之后,清空该目录
把上面的两个文件拷贝进去

ls  D:\tmp\zookeeper\version-2
 log.f32bb 
snapshot.f32b9 

重启本地zookeeper服务即可

第三方jar遍历拷贝方式

有一个好用的开源zkcopy,直接搞定。

git clone https://github.com/kshchepanovskyi/zkcopy.git

使用maven 构建jar包

mvn clean install

在原始服务器上执行如下命令向目标机server:port上拷贝数据,如果这个目标机是本地电脑显然很难实现拷贝(可以做外网映射)

java -Dsource="server:port/path" \
     -Ddestination="server:port/path" \
     -Dthreads=10 \
     -DremoveDeprecatedNodes=true \
     -jar target/zkcopy-*-jar-with-dependencies.jar 

该方法参考资料 https://blog.csdn.net/qianggezhishen/article/details/50380205

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
要进行Zookeeper的备份迁移,首先需要配置Zookeeper数据目录。数据目录的路径会在Zookeeper的配置文件zoo.cfg中的dataDir项进行配置,例如:dataDir=/home/admin/zookeeper/zkData。这个配置文件一般位于Zookeeper的安装目录下的conf文件夹中。 在进行Zookeeper服务迁移之前,为了防止数据丢失,需要对Zookeeper数据目录进行备份。在一些操作文档中可能没有提到备份的步骤,但是这是一个非常重要的步骤,所以在迁移过程中需要格外注意。 当进行备份迁移时,可以使用开源工具MSE ZooKeeper来支持从Zookeeper 3.4.x~3.8.x版本的数据迁移导入。这个工具能够帮助将数据从旧的Zookeeper版本迁移到新的版本。 具体的备份迁移过程可以按照以下步骤进行: . 配置Zookeeper数据目录,确保数据存储路径正确配置在zoo.cfg文件中的dataDir项。 2. 在进行迁移之前,对Zookeeper数据目录进行备份,以防数据丢失。 3. 使用开源工具MSE ZooKeeper,按照其提供的指导进行数据迁移导入操作。 通过以上步骤,你就可以完成Zookeeper的备份迁移了。记得在整个过程中要注意数据的安全性和完整性,确保数据不会丢失或损坏。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *2* [5 分钟完成 ZooKeeper 数据迁移](https://blog.csdn.net/java_beautiful/article/details/126850535)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *3* [如何通过CM迁移Zookeeper服务](https://blog.csdn.net/javastart/article/details/127314420)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值