openGauss学习笔记-316 openGauss 数据迁移-MySQL迁移-迁移MySQL数据库至openGauss-反向迁移

于 2024-07-30 18:38:47 发布
阅读量71 收藏
点赞数
分类专栏： openGauss学习笔记 文章标签： openGauss 国产数据库 开源数据库 数据库 RDBMS
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/shuchaoyang/article/details/140803729
版权

文章目录

openGauss学习笔记-316 openGauss 数据迁移-MySQL迁移-迁移MySQL数据库至openGauss-反向迁移

316.1 功能介绍

反向迁移是指将openGauss端产生的增量数据迁移至mysql端。

316.2 原理简介

debezium opengauss connector的source端，监控openGauss的xlog日志，并将数据的DML操作以AVRO格式写入到kafka；

debezium opengauss connector的sink端，从kafka读取AVRO格式的数据，在mysql端按表并行回放，从而完成数据的DML操作从openGauss在线迁移至mysql。

316.3 特性优势

反向迁移可满足用户业务迁移逃生的诉求，保持源端、目标端两个库并行运行，在目标端数据库出问题后应用能及时切回源端数据库。

316.4 操作步骤

反向迁移gs_replicate依赖MySQL一键式迁移工具gs_rep_portal，可实现反向迁移的安装、启动、停止、卸载整个过程。

了解本专栏 订阅专栏 解锁全文 超级会员免费看
superman超哥
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
订阅专栏
【国产数据库】数据迁移至openGauss
你在看屏幕的同时，屏幕也在注视着你
10-01 3543
【国产数据库】数据迁移至openGauss
SpringCloud学习笔记-狂神说
weixin_44202871的博客
07-17 540
SpringBoot 微服务
openGauss 数据迁移指南：MySQL迁移—反向迁移
weixin_53596073的博客
06-29 2005
反向迁移是指将openGauss端产生的增量数据迁移至mysql端。debezium opengauss connector的source端，监控openGauss的xlog日志，并将数据的DML操作以AVRO格式写入到kafka；debezium opengauss connector的sink端，从kafka读取AVRO格式的数据，在mysql端按表并行回放，从而完成数据的DML操作从openGauss在线迁移至mysql。
openGauss 数据迁移指南：MySQL迁移—全量迁移
weixin_53596073的博客
06-29 809
全量迁移gs_mysync是一个用Python3编写的将MySQL迁移至openGauss的复制工具，支持初始全量数据的复制功能。gs_mysync通过一次初始化配置，使用只读模式，将MySQL的数据全量拉取到openGauss。支持在同一快照下，表间数据并行迁移。全量迁移支持的功能：支持表及表数据、视图、触发器、自定义函数、存储过程的全量迁移。
openGauss数据库迁移和升级
互联网知识分享
09-25 356
同时，还需要根据新版本的要求，对现有数据库进行检查和准备，确保数据库的结构和数据符合升级要求。不同数据库管理系统支持的数据类型和语法有所不同，因此需要将原有数据库的数据类型和语法转换为目标数据库系统支持的格式。在数据库升级完成后，需要对升级后的数据库进行验证，以确保数据的完整性和一致性。在数据加载完成后，需要对迁移后的数据进行验证，以确保数据的完整性和一致性。实际应用中，可能还需要处理更复杂的数据转换和加载过程，以及进行更全面的数据验证。数据库迁移的目的可以是为了更好的性能、更高的可用性、更方便的管理等。
openGauss 数据迁移指南：MySQL迁移—MySQL语法兼容性评估工具
weixin_53596073的博客
06-29 1846
openGauss兼容性评估工具，支持从多个场景下获取sql语句进行兼容性评估，并输出评估报告。支持从mysql端采集sql语句，支持从mysql端采集以下几种sql类型：对象定义语句（DDL）。慢sql语句。此类sql通过查询mysql.slow_log表获得，需要用户开启慢sql记录至该表中。全量sql语句。此类sql通过查询mysql.general_log表获得，同样需要用户开启general log记录至该表中。支持从文件中获取sql语句，支持以下几种文件类型：sql文件。
Laravel学习笔记数据库数据库迁移案例.pdf
07-14
Laravel 数据库迁移案例学习笔记 Laravel 框架提供了一个强大的数据库迁移机制，允许开发者使用命令行工具 artisan 来管理数据库结构的变化。本文档将指导您如何使用 Laravel 进行数据库迁移，并详细介绍了迁移的...
Laravel学习笔记数据库数据库迁移案例[借鉴].pdf
10-19
up() 方法用于执行向前迁移，即创建新的数据库结构，down() 方法用于执行反向迁移，即撤销之前的变化。 例如，我们想创建一个名为“authors”的新表。在 up() 方法中，我们可以使用以下代码： ``` public function ...
DJANGO学习笔记-项目篇（云笔记项目）
togph的博客
07-08 1398
DJANGO学习之云笔记项目 1. 项目介绍 1.1 云笔记项目：用户可在该系统中记录自己的日常学习/旅游笔记，用户的数据将被安全的存储在云笔记平台；用户与用户之间数据为隔离存储（用户只有在登陆后才能使用相关笔记功能，且只能查阅自己的笔记内容） 1.2 功能拆解： 用户模块 注册 - 成为平台用户 登陆 - 校验用户身份 退出登陆 - 退出登陆状态 笔记模块 查看笔记列表 - 查 创建新笔记 - 增 修改笔记 - 改 删除笔记 - 删 2. 项目配置 2.1 项目创建： 进入命令行，输入
ShardingJdbc笔记-主从复制-读写分离-分库分表
GUYyyy的博客
03-24 869
测试代码：https://gitee.com/ylbuu/sharding-jdbc 安装MySQL 资源连接：https://repo.mysql.com/yum/mysql-5.7-community/el/7/x86_64/ 配置MySQL扩展源 rpm -ivh https://repo.mysql.com/yum/mysql-5.7-community/el/7/x86_64/mysql57-community-release-el7-10.noarch.rpm yum安装MySQL yum.
openGauss增量迁移
Oliviahome的博客
03-21 156
增量迁移是指将mysql数据迁移期间（包括全量和增量迁移）产生的增量数据迁移至openGauss端。基于开源三方件mysql-binlog-connector-java解析mysql的binlog，并根据mysql主备并行复制的原理，对可并行的事务在openGauss端采用多线程进行并行回放，以实现MySQL到openGauss端的在线迁移。其中并行事务的判断规则为：如果所有正在回放的事务的最小sequence_number大于该事务的last_committed，那么该事务就可以并行执行。
MogDB/openGauss 生态工具-MTK(Migration ToolKit) 数据库迁移
Enmotech的博客
07-20 1086
点击上方"蓝字"关注我们，享更多干货！一、准备环境1. 源库创建（Oracle）创建Oracle 11.2.0.4docker pull registry.cn-hangz...
openGauss工具链：MySQL一键式迁移工具gs_rep_portal
weixin_53596073的博客
04-18 324
gs_rep_portal是一个用Java编写的，在linux系统上运行的，集成了全量迁移、增量迁移、反向迁移、数据校验的工具。gs_rep_portal支持以上工具的一键式安装上述工具，设定迁移任务，任务根据用户设定的执行计划顺序的调用相应工具完成每个迁移步骤，并能实时展示每个步骤的状态、进度、异常原因等。
openGauss MySQL一键式迁移工具gs_rep_portal
2301_79720856的博客
03-27 471
gs_rep_portal是一个用Java编写的，在linux系统上运行的，集成了全量迁移、增量迁移、反向迁移、数据校验的工具。gs_rep_portal支持以上工具的一键式安装上述工具，设定迁移任务，任务根据用户设定的执行计划顺序的调用相应工具完成每个迁移步骤，并能实时展示每个步骤的状态、进度、异常原因等。
opengauss使用一键式脚本gs_rep_portal启动portal
07-21 187
portal会在workspace文件夹下创造对应id的文件夹，并将执行任务时的参数和日志等信息存入该文件夹。portal执行任务时将从config文件夹中复制一份配置文件到id对应的workspace下面作为这个任务的配置文件，建议每次运行迁移任务时使用不同的workspace.id。这里的参数为数个单词之间加下划线，比如"start_mysql_full_migration"这种形式，分为安装指令，启动指令，停止指令，卸载指令等，会在下文介绍。详情查看：https://opengauss.org。
openGauss 修改gs_rep_portal配置文件toolspath.properties
最新发布
07-24 267
详情查看：https://docs-opengauss.osinfra.cn。详情查看：https://opengauss.org。修改gs_rep_portal配置文件。
openGauss重庆Meetup丨云和恩墨技术专家分享MogDB技术创新与迁移实践
weixin_54551388的博客
04-25 173
4月23日，由 openGauss 社区主办，云和恩墨、重庆鲲鹏创新中心承办的 openGauss Meetup 活动在重庆西永微电产业园成功举办。此次活动是“openGauss 生态全国行”系列活动2022年的第一站，来自重庆地区各个行业的数十家企业的多位专家与数据库技术爱好者、开发者、DBA等齐聚一堂，就产业政策、开源文化与社区运营、商业应用案例、数据领域技术创新与行...
数据库周刊31丨openGauss 正式开源；7月数据库排行榜发布；浙江移动国产数据库AntDB迁移；抢鲜体验openGauss；oracle ADG跨版本搭建；PG解决社保问题；mysqlbin
ToyaAkira00的博客
07-07 416
热门资讯 1、openGauss 正式开源，华为公开发布源代码 【摘要】6月1日，华为正式宣布开源数据库能力，开放openGauss数据库源代码，并成立openGauss开源社区，社区官网（http://opengauss.org）同步上线。openGauss是一款开源关系型数据库管理系统，深度融合华为在数据库领域多年的深入积累和实践经验，结合企业级场景需求，持续构建竞争力。同时openGauss也是一个开源、免费的数据库平台，鼓励社区进行贡献、合作。 2、2020年7月国产数据库排行：华为、腾讯发新品，.
数据库迁移：mysql修改为opengauss
猴子的博客
01-30 797
原有的项目中使用mysql数据库保存应用数据，后面由于国产化要求，需要替换mysql为opengauss。按照如下配置，仅需修改配置文件，就可以在mysql和opengauss之间切换。代码结构如下，文件中mapper和gaussmapper分别为mysql和opengauss使用的mapper.xml文件。mysql函数pg不支持，如str_to_date,ifnull等，因此迁移数据库，需要修改之前的mapper文件。2、配置数据源，在原有mysql的基础上增加opengauss数据源配置。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值