openGauss学习笔记-313 openGauss 数据迁移-MySQL迁移-迁移MySQL数据库至openGauss-MySQL一键式迁移

最新推荐文章于 2024-09-04 09:11:43 发布
最新推荐文章于 2024-09-04 09:11:43 发布
阅读量178 收藏
点赞数
分类专栏： openGauss学习笔记 文章标签： openGauss 国产数据库 开源数据库 数据库 RDBMS
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/shuchaoyang/article/details/140594378
版权

文章目录

openGauss学习笔记-313 openGauss 数据迁移-MySQL迁移-迁移MySQL数据库至openGauss-MySQL一键式迁移

313.1 功能介绍

gs_rep_portal是一个用Java编写的，在linux系统上运行的，集成了全量迁移、增量迁移、反向迁移、数据校验的工具。gs_rep_portal支持以上工具的一键式安装上述工具，设定迁移任务，任务根据用户设定的执行计划顺序的调用相应工具完成每个迁移步骤，并能实时展示每个步骤的状态、进度、异常原因等。

313.2 注意事项

  • portal在执行增量迁移、反向迁移、增量校验时需要使用curl工具。
  • 同一个迁移计划的增量迁移和反向迁移不会同时开启，如果一个计划中包含了增量迁移和反向迁移，那么需要用户手动停止增量迁移，启动反向迁移。当用户启动反向迁移之后，无法再启动增量迁移。
  • 用户在停止增量迁移之后到启动反向迁移之前，禁止向openGauss进行作业，否则会导致这之间的数据丢失。
  • portal使用的workspace.id只能为小写字母与数字的组合。
  • portal在启动多个计划时，需要保证MySQL数据库实例各不相同，openGauss端
了解本专栏 订阅专栏 解锁全文 超级会员免费看
superman超哥
关注
专栏目录
订阅专栏
openGauss学习笔记-316 openGauss 数据迁移-MySQL迁移-迁移MySQL数据库至openGauss-反向迁移
超哥的博客
07-30 133
openGauss学习笔记-316 openGauss 数据迁移-MySQL迁移-迁移MySQL数据库至openGauss-反向迁移316.1 功能介绍316.2 原理简介316.3 特性优势316.
openGauss学习笔记-314 openGauss 数据迁移-MySQL迁移-迁移MySQL数据库至openGauss-全量迁移
超哥的博客
07-23 196
全量迁移gs_mysync是一个用Python3编写的将MySQL迁移至openGauss的复制工具，支持初始全量数据的复制功能。gs_mysync通过一次初始化配置，使用只读模式，将MySQL的数据全量拉取到openGauss。支持在同一快照下，表间数据并行迁移。
数据库迁移系列】从MySQL到openGauss的数据库对象迁移实践
gallopingdb的博客
08-04 458
基于开源三方件mysql-binlog-connector-java解析mysql的binlog, 并根据mysql主备进行复制的原理，对可并行的事务在openGauss端采用多线程进行并行回放，以实现MySQL到openGauss的在线迁移。通过支持表级并行迁移，提升MySQL全量迁移性能，基于sysbench测试模型，在Kunpeng-920 2p服务器上，10张表（单表容量三百万以上）使用10并发迁移，可达到大于300M/s的迁移性能。工具链：MySQL增量迁移支持十五级并行消费，提升增量迁移性能。
openGauss 数据迁移指南：MySQL迁移—MySQL一键式迁移（3）
weixin_53596073的博客
06-29 1753
并且需要注意的是：增量迁移和反向迁移不能同时开启，如果一个计划中包含了增量迁移和反向迁移，那么需要用户手动停止增量迁移，启动反向迁移。输入指令后，这个进程会退出，而正在执行计划的workspace.id为3的portal主进程会接收到启动反向迁移的消息，从而启动反向迁移，此时portal一直处于反向迁移状态。输入指令后，这个进程会退出，而正在执行计划的workspace.id为3的portal主进程会接收到停止增量迁移的消息，从而停止增量迁移，等待下一步指令。
openGauss 数据迁移指南：MySQL迁移—MySQL语法兼容性评估工具
weixin_53596073的博客
06-29 2074
openGauss兼容性评估工具，支持从多个场景下获取sql语句进行兼容性评估，并输出评估报告。支持从mysql端采集sql语句，支持从mysql端采集以下几种sql类型：对象定义语句（DDL）。慢sql语句。此类sql通过查询mysql.slow_log表获得，需要用户开启慢sql记录至该表中。全量sql语句。此类sql通过查询mysql.general_log表获得，同样需要用户开启general log记录至该表中。支持从文件中获取sql语句，支持以下几种文件类型：sql文件。
openGauss 数据迁移指南：MySQL迁移—全量迁移
weixin_53596073的博客
06-29 1140
全量迁移gs_mysync是一个用Python3编写的将MySQL迁移至openGauss的复制工具，支持初始全量数据的复制功能。gs_mysync通过一次初始化配置，使用只读模式，将MySQL的数据全量拉取到openGauss。支持在同一快照下，表间数据并行迁移。全量迁移支持的功能：支持表及表数据、视图、触发器、自定义函数、存储过程的全量迁移。
Mysql迁移OpenGauss
weixin_44739106的博客
03-10 5225
公司要做信创的迁移，本文简单描述了一下Mysql迁移到OpenGauss的大概流程步骤
openGauss 数据迁移指南：MySQL迁移—数据校验
weixin_53596073的博客
06-29 899
数据校验工具 gs_datacheck，分为check服务和extract服务。check服务用于数据校验，extract服务用于数据抽取和规整。全量校验：在全量数据迁移完成后，由extract服务对源端和目标端数据通过JDBC方式进行数据抽取然后规整计算，并将计算后的中间数据推送到kafka中。最后由check服务提取kafka中的中间数据，构建默克尔树，通过默克尔树比对实现表数据校验且输出校验结果。增量校验：由debezium服务侦听源端数据库的增量数据，到指定topic。
openGauss学习笔记-315 openGauss 数据迁移-MySQL迁移-迁移MySQL数据库至openGauss-增量迁移
超哥的博客
07-24 149
增量迁移是指将mysql数据迁移期间（包括全量和增量迁移）产生的增量数据迁移至openGauss端。
openGauss学习笔记-317 openGauss 数据迁移-MySQL迁移-迁移MySQL数据库至openGauss-数据校验
超哥的博客
08-05 198
openGauss学习笔记-317 openGauss 数据迁移-MySQL迁移-迁移MySQL数据库至openGauss-数据校验317.1 功能介绍317.2 原理介绍317.3 环境准备317.
openGauss 数据迁移指南：MySQL迁移—迁移MySQL数据库至openGauss
weixin_53596073的博客
06-29 320
当前openGauss支持对MySQL迁移服务，具体包括：MySQL一键式迁移全量迁移增量迁移反向迁移数据校验
【数据库】Mysql数据迁移到Opengauss
大壮
01-14 1275
openGauss是一款开源的关系型数据库管理系统，它具有多核高性能、全链路安全性、智能运维等企业级特性。openGauss内核早期源自开源数据库PostgreSQL，融合了华为在数据库领域多年的内核经验，在架构、事务、存储引擎、优化器及ARM架构上进行了适配与优化。作为一个开源数据库，期望与广泛的开发者共同构建一个多元化技术的开源数据库社区。openGauss架构高性能openGauss突破了多核CPU的瓶颈，实现两路鲲鹏128核150万tpmC，内存优化表（MOT）引擎达350万tpmC。
openGauss 数据迁移指南：MySQL迁移—反向迁移
weixin_53596073的博客
06-29 2081
反向迁移是指将openGauss端产生的增量数据迁移至mysql端。debezium opengauss connector的source端，监控openGauss的xlog日志，并将数据的DML操作以AVRO格式写入到kafka；debezium opengauss connector的sink端，从kafka读取AVRO格式的数据，在mysql端按表并行回放，从而完成数据的DML操作从openGauss在线迁移至mysql。
迁移mysql数据库到opengauss
FinelyYang的专栏
02-03 1517
openGauss侧使用的用户名密码分别是 gaussdb和 gaussdb@1qazx。openGauss服务器的IP和port分别是192.168.132.153和5432，目标数据库是db_smis，同时会在db_smis下创建schema：db_smis，迁移的表都将位于该schema下。迁移数据时，MySQL侧使用的用户名密码分别是 usr_replica 和 re@1qazx。MySQL服务器的IP和port分别是192.168.132.153和3306，待迁移的数据库是db_smis。
迁移MySQL到openGauss，DataKit嘎嘎猛~
weixin_53596073的博客
02-07 1083
对于在线模式的迁移任务，任务启动后，会首先进入全量迁移阶段，将MySQL端预置的数据迁移至目标库，全量迁移结束后会进入全量校验阶段，会输出每个表的校验结果；各插件围绕DataKit的资源中心进行扩展，完成数据库的运维，监控，迁移，开发，建模等复杂的操作。在datakit平台--资源中心--服务器管理中添加对应的服务器，被管理的机器才可用于安装迁移插件，本次实验用本机作为迁移插件的执行机。各插件围绕DataKit的资源中心进行扩展，完成数据库的运维，监控，迁移，开发，建模等复杂的操作。
系统国产化替代方案（三）Mysql数据迁移至OpenGauss
最新发布
qq_41057525的博客
09-04 1330
原因是我还没试过这个版本行不行，需要重新安装新版本OpenGauss。创建datakit数据库和迁移目标数据库testdb。访问https://ip:9494。吐槽一句：都是泪，踩了一遍又一遍的坑>~
迁移MySQL数据库至openGauss
Oliviahome的博客
03-21 270
对象、数据全量离线迁移；数据全量&增量校验；
openGauss插件使用指南:数据类型 —兼容MySQL时间类型
weixin_53596073的博客
07-03 736
由于 MySQL 原本的年份取值范围在 10000 以内，因此由于 MySQL 原本的年份取值范围在 10000 以内，因此如果想要输入大于等于 10000 年份的日期，请使用 'YYYY-MM-DD' 这种格式，例如 '10100-12-12'注意：由于 openGauss 固有的特性导致无法完全兼容 MySQL 时间数据类型的所有特性，因此需要根据本文档的要求进行特性的使用，避免使用文档描述外的特性，同时兼容后的特性已经覆盖了绝大部分场合的使用需求。
Laravel数据库迁移教程：创建与管理MySQL数据库
“Laravel学习笔记数据库数据库迁移案例.pdf” 在Laravel框架中，数据库迁移是管理数据库结构变化的一种有效方式，允许开发者以版本控制的方式来管理数据库。本篇笔记主要介绍了如何在Laravel中进行数据库迁移操作...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值