nacos zookeeper数据迁移

已于 2022-03-16 10:23:00 修改
阅读量2.7k 收藏
点赞数
分类专栏： spring cloud alibaba nacos 文章标签： nacos
于 2022-03-13 23:23:33 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43931625/article/details/123468860
版权

nacos zookeeper数据迁移

        

官网：https://nacos.io/zh-cn/docs/nacos-sync-use.html

nacos-sync：https://github.com/nacos-group/nacos-sync

        

             

                                   

nacos-sync

     

nacos-sync 支持迁移的数据中心

             

nacos <==> nacos：支持0.8到1.0及以上版本的nacos数据迁移
nacos <==> consul：只支持spring cloud注册中心数据迁移
nacos <==> euraka：只支持spring cloud注册中心数据迁移
nacos <==> zookeeper：只支持dubbo注册中心数据迁移

                

下载 nacos-sync，并编译jar包

git clone https://github.com/nacos-group/nacos-sync.git

cd nacosSync
mvn clean package -U

          

nacos-sync 配置文件：application.properties

server.port=8083
server.servlet.context-path=/

spring.jpa.properties.hibernate.dialect=org.hibernate.dialect.MySQL5Dialect
spring.jpa.hibernate.ddl-auto=update
spring.jpa.properties.hibernate.show_sql=false

spring.cloud.discovery.enabled=false

spring.datasource.url=jdbc:mysql://localhost:3306/nacos_sync?characterEncoding=utf8&connectTimeout=10000&socketTimeout=30000&autoReconnect=true&useUnicode=true&useSSL=false&serverTimezone=UTC&allowPublicKeyRetrieval=true
spring.datasource.username=root
spring.datasource.password=root

management.endpoints.web.exposure.include=*
management.endpoint.health.show-details=always

            

数据库建表sql：nacosSync.sql（一般会自动创建，不需要手动创建）

/******************************************/
/*   DB name = nacos_sync   */
/*   Table name = cluster   */
/******************************************/
CREATE TABLE `cluster` (
  `id` int(11) NOT NULL AUTO_INCREMENT,
  `cluster_id` varchar(255) COLLATE utf8mb4_bin DEFAULT NULL,
  `cluster_name` varchar(255) COLLATE utf8mb4_bin DEFAULT NULL,
  `cluster_type` varchar(255) COLLATE utf8mb4_bin DEFAULT NULL,
  `connect_key_list` varchar(255) COLLATE utf8mb4_bin DEFAULT NULL,
  `user_name` varchar(255) COLLATE utf8mb4_bin DEFAULT NULL,
  `password` varchar(255) COLLATE utf8mb4_bin DEFAULT NULL,
  PRIMARY KEY (`id`)
) ENGINE=InnoDB AUTO_INCREMENT=5 DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_bin;
/******************************************/
/*   DB name = nacos_sync   */
/*   Table name = system_config   */
/******************************************/
CREATE TABLE `system_config` (
  `id` int(11) NOT NULL AUTO_INCREMENT,
  `config_desc` varchar(255) COLLATE utf8mb4_bin DEFAULT NULL,
  `config_key` varchar(255) COLLATE utf8mb4_bin DEFAULT NULL,
  `config_value` varchar(255) COLLATE utf8mb4_bin DEFAULT NULL,
  PRIMARY KEY (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_bin;
/******************************************/
/*   DB name = nacos_sync   */
/*   Table name = task   */
/******************************************/
CREATE TABLE `task` (
  `id` int(11) NOT NULL AUTO_INCREMENT,
  `dest_cluster_id` varchar(255) COLLATE utf8mb4_bin DEFAULT NULL,
  `group_name` varchar(255) COLLATE utf8mb4_bin DEFAULT NULL,
  `name_space` varchar(255) COLLATE utf8mb4_bin DEFAULT NULL,
  `operation_id` varchar(255) COLLATE utf8mb4_bin DEFAULT NULL,
  `service_name` varchar(255) COLLATE utf8mb4_bin DEFAULT NULL,
  `source_cluster_id` varchar(255) COLLATE utf8mb4_bin DEFAULT NULL,
  `task_id` varchar(255) COLLATE utf8mb4_bin DEFAULT NULL,
  `task_status` varchar(255) COLLATE utf8mb4_bin DEFAULT NULL,
  `version` varchar(255) COLLATE utf8mb4_bin DEFAULT NULL,
  `worker_ip` varchar(255) COLLATE utf8mb4_bin DEFAULT NULL,
  PRIMARY KEY (`id`)
) ENGINE=InnoDB AUTO_INCREMENT=6 DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_bin;

                 

             

                                   

nacos-sync 启动

    

创建mysql，并创建nacos_sync数据库

# 创建mysql容器
docker run -it -d --net fixed --ip 172.18.0.10 -p 3307:3306 \
-e MYSQL_ROOT_PASSWORD=root --name mysql2 mysql

# 创建nacos_sync数据库
mysql> create database nacos_sync;
Query OK, 1 row affected (0.01 sec)

nacos-sync配置文件：修改数据库配置

# 端口默认为8083
​server.port=8083
server.servlet.context-path=/

spring.jpa.properties.hibernate.dialect=org.hibernate.dialect.MySQL5Dialect
spring.jpa.hibernate.ddl-auto=update
spring.jpa.properties.hibernate.show_sql=false

spring.cloud.discovery.enabled=false

# 数据库地址、用户名、密码
spring.datasource.url=jdbc:mysql://localhost:3307/nacos_sync?characterEncoding=utf8&connectTimeout=10000&socketTimeout=30000&autoReconnect=true&useUnicode=true&useSSL=false&serverTimezone=UTC&allowPublicKeyRetrieval=true
spring.datasource.username=root
spring.datasource.password=root

management.endpoints.web.exposure.include=*
management.endpoint.health.show-details=always
​

         

启动nacos-sync

huli@bogon nacosSync.0.4.7 % cd nacosSync
huli@bogon nacosSync % ls
LICENSE			bin			logs
NOTICE			conf			nacosSync-server.jar

# 启动nacos-sync
huli@bogon nacosSync % bin/startup.sh start
=============JAVA_HOME:/Library/Java/JavaVirtualMachines/jdk-17.0.2.jdk/Contents/Home
=============BASE_DIR:/Users/huli/mysql/nacos/nacos-sync/nacossync-distribution/target/nacosSync.0.4.7/nacosSync
=============JAVA:/Library/Java/JavaVirtualMachines/jdk-17.0.2.jdk/Contents/Home/bin/java
nacossync is starting，you can check the /Users/huli/mysql/nacos/nacos-sync/nacossync-distribution/target/nacosSync.0.4.7/nacosSync/logs/nacossync_start.out

           

查看启动日志

huli@bogon nacosSync % cat logs/nacossync_start.out
/Library/Java/JavaVirtualMachines/jdk-17.0.2.jdk/Contents/Home/bin/java  -server -Xms2g -Xmx2g -Xmn1g -XX:MetaspaceSize=256m -XX:MaxMetaspaceSize=512m -XX:-OmitStackTraceInFastThrow -XX:+HeapDumpOnOutOfMemoryError -XX:HeapDumpPath=/Users/huli/mysql/nacos/nacos-sync/nacossync-distribution/target/nacosSync.0.4.7/nacosSync/nacossync_java_heapdump.hprof -XX:-UseLargePages -Dspring.config.location=/Users/huli/mysql/nacos/nacos-sync/nacossync-distribution/target/nacosSync.0.4.7/nacosSync/conf/application.properties -DnacosSync.home=/Users/huli/mysql/nacos/nacos-sync/nacossync-distribution/target/nacosSync.0.4.7/nacosSync -Xlog:gc*:file=/Users/huli/mysql/nacos/nacos-sync/nacossync-distribution/target/nacosSync.0.4.7/nacosSync/logs/nacossync_gc.log:time,tags:filecount=10,filesize=102400 -jar /Users/huli/mysql/nacos/nacos-sync/nacossync-distribution/target/nacosSync.0.4.7/nacosSync/nacosSync-server.jar --logging.config=/Users/huli/mysql/nacos/nacos-sync/nacossync-distribution/target/nacosSync.0.4.7/nacosSync/conf/logback-spring.xml

 _   _                           _____
| \ | |                         /  ___|                  Nacos-Sync 0.4.7
|  \| | __ _  ___ ___  ___ _____\ `--. _   _ _ __   ___  Port: 8083
| . ` |/ _` |/ __/ _ \/ __|______`--. | | | | '_ \ / __| Pid: 1296
| |\  | (_| | (_| (_) \__ \     /\__/ | |_| | | | | (__  Console: http://127.0.0.1:8083
\_| \_/\__,_|\___\___/|___/     \____/ \__, |_| |_|\___|
                                        __/ |
                                       |___/

2022-03-15 10:33:17.639 [background-preinit] INFO  org.hibernate.validator.internal.util.Version - HV000001: Hibernate Validator 6.1.7.Final
2022-03-15 10:33:17.653 [main] INFO  com.alibaba.nacossync.NacosSyncMain - Starting NacosSyncMain v0.4.7 using Java 17.0.2 on bogon with PID 1296 (/Users/huli/mysql/nacos/nacos-sync/nacossync-distribution/target/nacosSync.0.4.7/nacosSync/nacosSync-server.jar started by huli in /Users/huli/mysql/nacos/nacos-sync/nacossync-distribution/target/nacosSync.0.4.7/nacosSync)
2022-03-15 10:33:17.654 [main] INFO  com.alibaba.nacossync.NacosSyncMain - No active profile set, falling back to default profiles: default
2022-03-15 10:33:19.597 [main] INFO  o.s.d.r.config.RepositoryConfigurationDelegate - Bootstrapping Spring Data JPA repositories in DEFAULT mode.
2022-03-15 10:33:19.934 [main] INFO  o.s.d.r.config.RepositoryConfigurationDelegate - Finished Spring Data repository scanning in 321 ms. Found 3 JPA repository interfaces.
2022-03-15 10:33:20.296 [main] INFO  o.springframework.cloud.context.scope.GenericScope - BeanFactory id=90b9c9aa-25e5-34da-92af-68692576cbac
2022-03-15 10:33:20.958 [main] INFO  o.s.boot.web.embedded.tomcat.TomcatWebServer - Tomcat initialized with port(s): 8083 (http)
2022-03-15 10:33:20.976 [main] INFO  org.apache.coyote.http11.Http11NioProtocol - Initializing ProtocolHandler ["http-nio-8083"]
2022-03-15 10:33:20.976 [main] INFO  org.apache.catalina.core.StandardService - Starting service [Tomcat]
2022-03-15 10:33:20.977 [main] INFO  org.apache.catalina.core.StandardEngine - Starting Servlet engine: [Apache Tomcat/9.0.45]
2022-03-15 10:33:21.076 [main] INFO  o.a.c.core.ContainerBase.[Tomcat].[localhost].[/] - Initializing Spring embedded WebApplicationContext
2022-03-15 10:33:21.077 [main] INFO  o.s.b.w.s.c.ServletWebServerApplicationContext - Root WebApplicationContext: initialization completed in 3348 ms
2022-03-15 10:33:21.532 [main] INFO  org.hibernate.jpa.internal.util.LogHelper - HHH000204: Processing PersistenceUnitInfo [name: default]
2022-03-15 10:33:21.662 [main] INFO  org.hibernate.Version - HHH000412: Hibernate ORM core version 5.4.30.Final
2022-03-15 10:33:21.910 [main] INFO  org.hibernate.annotations.common.Version - HCANN000001: Hibernate Commons Annotations {5.1.2.Final}
2022-03-15 10:33:22.107 [main] INFO  com.zaxxer.hikari.HikariDataSource - HikariPool-1 - Starting...
2022-03-15 10:33:22.474 [main] INFO  com.zaxxer.hikari.HikariDataSource - HikariPool-1 - Start completed.
2022-03-15 10:33:22.505 [main] INFO  org.hibernate.dialect.Dialect - HHH000400: Using dialect: org.hibernate.dialect.MySQL5Dialect
2022-03-15 10:33:23.469 [main] INFO  o.h.e.t.jta.platform.internal.JtaPlatformInitiator - HHH000490: Using JtaPlatform implementation: [org.hibernate.engine.transaction.jta.platform.internal.NoJtaPlatform]
2022-03-15 10:33:23.479 [main] INFO  o.s.orm.jpa.LocalContainerEntityManagerFactoryBean - Initialized JPA EntityManagerFactory for persistence unit 'default'
2022-03-15 10:33:24.518 [main] WARN  o.s.b.a.o.j.JpaBaseConfiguration$JpaWebConfiguration - spring.jpa.open-in-view is enabled by default. Therefore, database queries may be performed during view rendering. Explicitly configure spring.jpa.open-in-view to disable this warning
2022-03-15 10:33:24.815 [main] INFO  o.s.b.actuate.endpoint.web.EndpointLinksResolver - Exposing 16 endpoint(s) beneath base path '/actuator'
2022-03-15 10:33:24.972 [main] INFO  o.s.b.a.web.servlet.WelcomePageHandlerMapping - Adding welcome page: class path resource [static/index.html]
2022-03-15 10:33:25.198 [main] INFO  o.s.c.n.e.c.DiscoveryClientOptionalArgsConfiguration - Eureka HTTP Client uses RestTemplate.
2022-03-15 10:33:25.299 [main] WARN  o.s.c.l.c.LoadBalancerCacheAutoConfiguration$LoadBalancerCaffeineWarnLogger - Spring Cloud LoadBalancer is currently working with the default cache. You can switch to using Caffeine cache, by adding it and org.springframework.cache.caffeine.CaffeineCacheManager to the classpath.
2022-03-15 10:33:25.321 [main] INFO  org.apache.coyote.http11.Http11NioProtocol - Starting ProtocolHandler ["http-nio-8083"]
2022-03-15 10:33:25.350 [main] INFO  o.s.boot.web.embedded.tomcat.TomcatWebServer - Tomcat started on port(s): 8083 (http) with context path ''
2022-03-15 10:33:25.776 [main] INFO  com.alibaba.nacossync.NacosSyncMain - Started NacosSyncMain in 9.311 seconds (JVM running for 10.243)

            

localhost:8083

            

            

            

            

         

              

                                   

数据迁移

   

**********

服务信息

       

zooinspector 可视化界面

         

           

                            

HelloService

public interface HelloService {

    String hello();
}

         

Hello2Service

public interface Hello2Service {

    String hello();
}

            

HelloServiceImpl

@DubboService(group = "a", version = "1.0.0")
public class HelloServiceImpl implements HelloService {

    @Override
    public String hello() {
        System.out.println("hello provider");

        return "success";
    }
}

          

Hello2ServiceImpl

@DubboService
public class Hello2ServiceImpl implements Hello2Service {

    @Override
    public String hello() {
        System.out.println("hello provider 2");

        return "success 2";
    }
}

           

**********

迁移操作

       

添加集群配置

         

             

nacos-sync 添加同步任务

         

          

nacos 查看服务列表

         

 服务同步成功

             

         

o_瓜田李下_o
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
nacos多数据源版本
08-26
nacos多数据源版本,支持oracle，mysql，postgresql其中mysql可以兼容达梦数据库
NacosSync 用户手册
深圳市多克创新科技有限公司
12-02 1355
NacosSync 用户手册
记录一次在k8s上nacos2.3.1无法注册微服务的问题
pengkai焱的博客
03-25 1120
*问题回顾：**在k8s平台上以有状态副本集的方式部署nacos2.3.1,若依微服务无法注册到nacos上。
迁移 Nacos 和 ZooKeeper，有了新工具
Candyz7的博客
08-16 172
如果多实例 MSE Sync 在同步过程中宕机，服务信息会通过其他 MSE Sync 实例进行同步，保证服务信息在源集群和目标集群中的完整性和实时性，此时只需要重新启动宕机的 MSE Sync 加入同步过程即可，加入过程不会对现有同步过程产生影响。之后在服务同步中添加新的同步，在选择源集群和同步类型之后（同步类型为服务信息的情况下）MSE Sync 会自动拉取源集群中的服务信息，可通过全选，一键同步全部服务，确定之后，服务信息就会在源集群和目标集群中双向同步。如何通过 MSE Sync 进行上云迁移。...
Nacos16# 实战|NacosSync双向复制指南
gaoliang1719的专栏
08-30 1025
引言Nacos的注册发现和配置中心的源码基本录完了，还有一块是不同集群之间的同步。zk同步到Nacos集群，nacos集群之间做多活需要数据复制等。那本文就先看下如何使用它，进而后面文章分...
旧nacos数据和配置迁移到新nacos中
一方湖泊
07-04 3276
将旧nacos中的conf、data目录拷贝到新nacos中做覆盖操作。
Nacos的持久化（配置信息存到mysql，可迁移）
jack__love的博客
10-09 4452
Nacos的持久化（配置信息存到mysql，可迁移）
nacos迁移及踩坑历程
lxd1373006963的博客
08-09 803
nacos迁移相关问题及踩坑解决方法
nacos迁移
weixin_43334719的博客
12-22 897
nacos迁移
nacos中数据库数据导入
02-05
nacos中数据库数据导入
nacos适配达梦数据源
02-22
nacos适配达梦数据源，包含window linux版可直接使用，包含源码部分可自行修改内容自行编译。可导入idea自行编译，已编译好可直接使用的从nacos-2.1.2\distribution\target拷贝使用内含脚本sql文件自行导入达梦...
nacos2.2.1 oracle数据源版
06-08
nacos2.2.1 oracle数据源版 在原版2.2.1的基础上进行适配改造同时修改了部分源码中存在的逻辑问题 工作中处理【CNVD-2023-17316】漏洞时需要对当前版本nacos进行升级，发现不存在类似的资源，故自己对原版2.2.1版本...
nacos配置中心数据
03-29
nacos配置中心数据
mysql单机在线迁移_nacos单机迁移至集群
weixin_42395980的博客
02-02 342
环境准备软件IP端口mysql 5.7192.168.0.1763306nginx 1.16.0192.168.0.1768888nacos011.1.3192.168.0.1768846nacos021.1.3192.168.0.1768847nacos031.1.3192.168.0.1768848一、部署MySQL1、安装MySQLdocker pull mysql:5.7docker...
【NacosSync】注册中心同步组件使用教程ZooKeeper迁移到Nacos
太空眼睛的专栏
07-16 611
NacosSync是一个支持多种注册中心的同步组件,基于Spring boot开发框架,数据层采用Spring Data JPA,遵循了标准的JPA访问规范,支持多种数据源存储,默认使用Hibernate实现,更加方便的支持表的自动创建更新使用了高效的事件异步驱动模型, 支持多种自定义事件,使得同步任务处理的延时控制在3s,8C16G的单机能够支持6K的同步任务。
zookeeper到nacos的迁移实践
捉虫大师
07-11 947
本文已收录 https://github.com/lkxiaolou/lkxiaolou 欢迎star。 技术选型 公司的RPC框架是dubbo，配合使用的服务发现组件一直是zookeeper，长久以来也没什么大问题。至于为什么要考虑换掉zookeeper，并不是因为它的性能瓶颈，而是考虑往云原生方向演进。 云原生计算基金会（CNCF）对云原生的定义是： 云原生技术有利于各组织在公有云、私有云和混合云等新型动态环境中，构建和运行可弹性扩展的应用。云原生的代表技术包括容器、服务网格、微服务、不可变基础设.
WARN o.s.c.l.c.LoadBalancerCacheAutoConfiguration$LoadBalancerCaffeineWarnLogger - [LoadBalancerCa
m0_37585684的博客
06-24 491
项目启动报标题警告，通过添加依赖： 得到解决：
双活工作关于nacos注册中心的数据迁移
weixin_36098377的博客
02-10 1157
最近在做一个双活的项目，在纠结一个注册中心是在双活机房都准备一个，那主机房的数据如果传过去呢，查了一些资料，最终在官网查到了一个NacosSync 的组件，主要用来做数据传输的，并且支持在线替换注册中心的，下来我摘抄一下迁移的流程。，在查到这个文档的时候发现nacos也有restful的api，方便可以结合前端组件进行注册中心的数据迁移到内管上，避开上线流程的约束。
配置文件迁移到nacos以及踩坑
qq_50629351的博客
09-09 1557
配置文件迁移到nacos
nacos单机版迁移
最新发布
05-25
如果您需要将Nacos单机版迁移到另一台机器上，可以按照以下步骤操作： 1. 备份Nacos单机版数据，包括conf目录和data目录。 2. 将备份的数据拷贝到新的机器上的Nacos安装目录下。 3. 修改conf目录下的cluster.conf...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值