GBase 8s 数据库ER同步原始数据

最新推荐文章于 2024-07-19 00:12:38 发布
最新推荐文章于 2024-07-19 00:12:38 发布
阅读量541 收藏 20
点赞数 21
文章标签： 数据库 GBASE南大通用 GBase
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_47390342/article/details/140100190
版权

原文链接：

https://www.gbase.cn/community/post/3946

更多精彩内容尽在南大通用GBase技术社区，南大通用致力于成为用户最信赖的数据库产品供应商。

在定义好复制服务器以及复制以后，执行 cdr start replicate可以将源库中的初始数据同步到目标服务器。该方法优点是过程简单，缺点是同步速度较慢。适用于数据量小的复制环境。相关的参数是CDR_QUEUEMEM。

同步的操作为在目标服务器上增加源服务器上存在而目标服务器中不存在的行和修改源服务器与目标服务器均存在但不一致的行。针对目标服务器上存在而源服务器中不存在的行的同步策略：

选项

说明

delete

根据参照完整性约束从目标服务器中删除行和从属行

keep

保留目标服务器上的行

merge

在目标服务器上保留行并将其复制到源服务器

测试环境：

两个实例中同时创建一个数据库testdb,并创建表t1-t5,均建有主键约束，然后分别向表中插入原始数据，如下：

表

group1

group2

t1

> select * from t1;

a           b

1           1

2           2

4           4

5           5

> select * from t1;

a           b

1           1

2           1

3           3

5           5

t2

> select * from t2;

a           b

1           1

5           5

2           2

4           4

> select * from t2;

a           b

1           1

2           1

3           3

5           5

t3

> select * from t3;

a           b

1           1

2           2

4           4

5           5

> select * from t3;

a           b

1           1

2           1

3           3

5           5

t4

> select * from t4;

a           b

1           1

2           2

4           4

5           5

6           6

> select * from t4;

a           b

1           1

2           1

3           3

5           5

6           6

t5

> select * from t5;

a           b

1           1

2           2

4           4

5           5

> select * from t5;

a           b

1           1

2           1

3           3

5           5

定义复制：
cdr define replicate --conflict=ignore   rep_testdb_t1 "testdb@group1:gbasedbt.t1" "select * from t1" "testdb@group2:gbasedbt.t1"  "select * from t1"
cdr define replicate --conflict=ignore   rep_testdb_t2 "testdb@group1:gbasedbt.t2" "select * from t2" "testdb@group2:gbasedbt.t2"  "select * from t2"
cdr define replicate --conflict=ignore   rep_testdb_t3 "testdb@group1:gbasedbt.t3" "select * from t3" "testdb@group2:gbasedbt.t3"  "select * from t3"
cdr define replicate --conflict=ignore   rep_testdb_t4 "testdb@group1:gbasedbt.t4" "select * from t4" "testdb@group2:gbasedbt.t4"  "select * from t4"
cdr define replicate --conflict=ignore  rep_testdb_t5 "testdb@group1:gbasedbt.t5" "select * from t5" "testdb@group2:gbasedbt.t5"   "select * from t5"
此时查看复制状态均为Inactive
[gbasedbt@gbase42 ~]$ cdr list repl rep_testdb_t1 rep_testdb_t2 rep_testdb_t3 rep_testdb_t4 rep_testdb_t5

DEFINED REPLICATES ATTRIBUTES
------------------------------
REPLICATE:        rep_testdb_t1
STATE:            Inactive ON:group2
CONFLICT:         Ignore
FREQUENCY:        immediate
QUEUE SIZE:       0
PARTICIPANT:      testdb:gbasedbt.t1
OPTIONS:          transaction,fullrow
REPLID:           131079 / 0x20007
REPLMODE:         PRIMARY  ON:group2
APPLY-AS:         GBASEDBT ON:group2
REPLTYPE:         Master

REPLICATE:        rep_testdb_t2
STATE:            Inactive ON:group2
CONFLICT:         Ignore
FREQUENCY:        immediate
QUEUE SIZE:       0
PARTICIPANT:      testdb:gbasedbt.t2
OPTIONS:          transaction,fullrow
REPLID:           131080 / 0x20008
REPLMODE:         PRIMARY  ON:group2
APPLY-AS:         GBASEDBT ON:group2
REPLTYPE:         Master

REPLICATE:        rep_testdb_t3
STATE:            Inactive ON:group2
CONFLICT:         Ignore
FREQUENCY:        immediate
QUEUE SIZE:       0
PARTICIPANT:      testdb:gbasedbt.t3
OPTIONS:          transaction,fullrow
REPLID:           131081 / 0x20009
REPLMODE:         PRIMARY  ON:group2
APPLY-AS:         GBASEDBT ON:group2
REPLTYPE:         Master

REPLICATE:        rep_testdb_t4
STATE:            Inactive ON:group2
CONFLICT:         Ignore
FREQUENCY:        immediate
QUEUE SIZE:       0
PARTICIPANT:      testdb:gbasedbt.t4
OPTIONS:          transaction,fullrow
REPLID:           131082 / 0x2000a
REPLMODE:         PRIMARY  ON:group2
APPLY-AS:         GBASEDBT ON:group2
REPLTYPE:         Master

REPLICATE:        rep_testdb_t5
STATE:            Inactive ON:group1
CONFLICT:         Ignore
FREQUENCY:        immediate
QUEUE SIZE:       0
PARTICIPANT:      testdb:gbasedbt.t5
OPTIONS:          transaction,fullrow
REPLID:           131083 / 0x2000b
REPLMODE:         PRIMARY  ON:group1
APPLY-AS:         GBASEDBT ON:group1
REPLTYPE:         Master
启动复制：
cdr start repl rep_testdb_t1 
cdr start repl rep_testdb_t2 --syncdatasource=group1 --extratargetrows=delete
cdr start repl rep_testdb_t3 --syncdatasource=group1 --extratargetrows=keep
cdr start repl rep_testdb_t4 --syncdatasource=group1 --extratargetrows=merge
cdr start repl rep_testdb_t5 --syncdatasource=group1
原始数据对比：

表

启动复制前group1

启动复制前group2

启动复制后group1

启动复制后group2

t1

> select * from t1;

a           b

1           1

2           2

4           4

5           5

> select * from t1;

a           b

1           1

2           1

3           3

5           5

> select * from t1;

a           b

1           1

2           2

4           4

5           5

> select * from t1;

a           b

1           1

2           1

3           3

5           5

t2

> select * from t2;

a           b

1           1

5           5

2           2

4           4

> select * from t2;

a           b

1           1

2           1

3           3

5           5

> select * from t2;

a           b

1           1

5           5

2           2

4           4

> select * from t2;

a           b

1           1

2           2

5           5

4           4

t3

> select * from t3;

a           b

1           1

2           2

4           4

5           5

> select * from t3;

a           b

1           1

2           1

3           3

5           5

> select * from t3;

a           b

1           1

2           2

4           4

5           5

> select * from t3;

a           b

1           1

2           2

3           3

5           5

4           4

t4

> select * from t4;

a           b

1           1

2           2

4           4

5           5

6           6

> select * from t4;

a           b

1           1

2           1

3           3

5           5

6           6

> select * from t4;

a           b

1           1

2           2

4           4

5           5

6           6

3           3

> select * from t4;

a           b

1           1

2           2

3           3

5           5

6           6

4           4

t5

> select * from t5;

a           b

1           1

2           2

4           4

5           5

> select * from t5;

a           b

1           1

2           1

3           3

5           5

> select * from t5;

a           b

1           1

2           2

4           4

5           5

> select * from t5;

a           b

1           1

2           2

5           5

4           4

结论：
  • 不使用-S 参数指定数据源，则不开启原始同步，对复制启动前的数据不做处理；
  • 使用-S参数指定数据源，目标端多余行（以主键为依据）的删除，此时目标端与源端数据保持一致；
  • 使用-S参数指定数据源，目标端多余行的保留，此时目标端数据为源端数据+目标端多余行；
  • 使用-S参数指定数据源，目标端多余行的合并，此时目标端与源端数据一致，均为源端数据+目标端多余行；
  • 使用-S参数指定数据源，缺省对目标端多余行的行为为删除

GBase 8s 数据库的复制技术不仅提高了数据的可用性，还通过灵活的冲突处理策略，满足了多样化的业务需求。掌握这些技术，将有助于构建更加健壮和灵活的数据架构。

原文链接：

https://www.gbase.cn/community/post/3946

更多精彩内容尽在南大通用GBase技术社区，南大通用致力于成为用户最信赖的数据库产品供应商。

GBASE数据库
关注
  • 21
    点赞
  • 踩
  • 20
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
使用GBase 8s数据库
sinat_33233315的博客
10-31 1245
使用GBase 8s数据库
GBASE 8s数据库参数管理
因为吃过天津一家超好吃的八珍豆腐从而改名为八珍豆腐的博客
08-19 769
GBase 8s 数据库服务器的参数文件位于安装目录的etc子目录下，标准参数文件为onconfig.std。导出ONCONFIG文件，同时导出内容包括默认的、内部未公开的一些参数设置，如。参数修改：一般直接编辑文件，重启数据库实例，也可以通过动态设置修改大部分参数。onconfig_diff对比两个ONCONFIG参数文件的差异。目前已经支持绝大部分参数的在线动态修改，可以通过。动态修改参数值，当前生效，不保存到参数文件。动态修改参数值，当前生效，且保存到参数文件。打印ONCONFIG参数文件到屏幕。
Kettle连接到GBase 8s数据库
liaosnet的专栏
11-28 738
如下图，在data-integration\lib下添加连接GBase 8s数据库的驱动gbasedbtjdbc.jar(视Server版本，增加匹配的驱动)请输入连接成功后要执行的SQL语句，用分号(:)隔开中，增加强制指定使用的库，库名来源于上面的URL，如 database t20db;自定义连接URL 实际的GBase 8s连接URL。指定连接名称，如这里使用TAR_GBase8s。或者是在 转换 -> DB连接 -> 新建。连接方式使用 Native(JDBC)如下图，表示连接成功。
GBASE 8s 数据库安装方式
因为吃过天津一家超好吃的八珍豆腐从而改名为八珍豆腐的博客
03-25 810
Gbase8s数据库有三种安装方式：典型安装、定制安装、静默安装。 典型安装 缺省情况下，典型安装设置将创建为您的主机环境配置的即时可用的数据库服务器实例。但是，您可以禁用安装应用程序中的创建服务器实例选项。 以root 身份登录，进入解压目录，执行要安装的产品的安装脚本 ids_install，即可进行安装。 定制安装 定制安装，也就是通常说的自定义安装。 使用定制安装可在安装GBase 8s 时只...
GBASE 8s数据库监控
因为吃过天津一家超好吃的八珍豆腐从而改名为八珍豆腐的博客
08-19 329
通过SQL语句查询系统表的方式，返回综合的、有组织性的、有实际数据根据的信息，DBA根据文本可以直接找到系统性能的问题，从而进行快速、有效地优化，同时可以根据这些有效数据完成数据库优化过程的报告文档。，功能是读取共享内存的内容和结构，提供命令被执行那一时刻的统计数据。在onstat输出的过程中，共享内存的内容可能会发生改变。、等命令的方式监控Gbase 8s 数据库的运行情况，从而确定数据库优化方案。OAT是Open Admin Tool的简称，是Gbase 8s数据库自带的一款数据库图形界面管理工具。
gbase8s数据库启动异常
wangyx01的博客
05-25 183
根据52a24801 查找看是否有使用此共享内存的残留进程。在实际场景中偶尔会遇到数据库启动异常且后台无任何错误日志。kill 掉之后再次启动，数据库启动成功。排查发现 系统中存在大量的僵尸进程。则对应的key 为52a24801。计算出数据库对应的共享内存段起始。可以猜测数据库启动异常与此有关。启动异常退出，后台无错误日志。
Gbase 8s数据库日志简介及管理
因为吃过天津一家超好吃的八珍豆腐从而改名为八珍豆腐的博客
04-21 930
Gbase 8s 数据库中的逻辑日志和物理日志是两种非常重要的磁盘构件。逻辑日志用来存放所有事务的操作过程，物理日志用来存放数据的前映像。在默认状态下，当服务器初始化时，逻辑日志和物理日志被创建在root dbspace上，在这之后逻辑日志和物理日志需要迁移到独立的 logdbspace和plogdbspace上。 逻辑日志： 逻辑日志主要用来记录事务细节，由三个或更多的逻辑日志文件组成循环文件。逻辑日志除了事务回滚、系统故障恢复需要使用，还被使用在Gbase 8s的高可用性数据复制技术...
Gbase8s数据库安装教程
wangmingjun5561的博客
12-28 2262
Gbase8s数据库安装教程，gbase studio连接教程
GBase 8s 数据库服务架构
DAISER的博客
03-28 488
数据库服务架构 GBase 8s总体上由三大部分组成：管理工具、应用接口、数据库主服务。 Ø管理工具 包含图形化管理工具和命令行管理工具。 l图形化管理工具 •安全管理器：用于安全标签、用户赋权等安全管理相关图形化界面； •审计管理器：安全审计的打开、关闭，审计标签设定，审计记录查看等功能； •统一监控平台：提供数据库系统的运行状态信息展示，供系统维护人员、系统管理员等角色对数据库进行调优、排错等日常维护工作； •迁移工具：提供同源或非同源...
GBase8s数据库RENAME DATABASE 语句
weixin_48486849的博客
04-07 712
使用 RENAME DATABASE 语句来更改数据库的名称； 用法 如果下列条件之一为真，则您可重命名数据库： 1、您创建了该数据库。 2、您有对该数据库的 DBA 权限。 然而，如果指定的数据库包含任何下列对象，则 RENAME DATABASE 语句失败，并报错 - 9874： 1、虚拟表 2、虚拟索引 3、R-tree 索引 在用户定义的主访问方法中或在用户定义的辅助访问方法中，引用数据库的当前名称的 DataBlade。 您仅可重命名您当前连接到的数据库服务器的数据库。 您不可从 SPL 例程之内
gbase8s 数据库数据的导入和导出.doc
02-23
gbase8s 数据库数据的导入和导出 本文总结了 GBase8s 数据库常用的数据导入和导出工具和基本用法，包括Unload/Load、Dbload、Dbexport/Dbimport 和外部表四种方式。 一、Unload/Load Unload/Load 是最常用的简单...
GBase8s数据库存储单元介绍-页.docx
11-24
GBase 8s 数据库存储单元是指数据库存储和管理数据的仓库。数据库空间的有效使用和维护不仅是数据库管理的重要工作，也是大多数开发人员所关心的内容，它直接关系着数据库性能的发挥。 存储结构 GBase 8s 数据库...
DbVisualizer连接南大通用Gbase8s数据库指南.docx
03-24
DbVisualizer是一款强大的数据库管理工具，它支持多种数据库系统，包括南大通用的Gbase8s。本指南将详细介绍如何使用DbVisualizer连接到Gbase8s数据库。 首先，确保你已经准备好了JDK安装包和Gbase8s的驱动jar包。...
GBase8s数据库多租户介绍
05-22
GBase8s数据库多租户介绍 GBase 8s数据库多租户是指在单个GBase 8s实例上，通过创建多个租户数据库，来实现为多个客户端分离存储空间、数据以及计算资源的目的。这种架构可以满足多种商业模式，例如，小型商业机构...
GBASE8s数据库配置集群需求.doc
03-24
GBASE8s数据库是一款高性能的分布式列式数据库，主要用于大数据分析和处理。配置集群是为了实现高可用性和数据复制，确保服务的稳定性和数据的安全性。以下是根据提供的文档内容解析出的相关知识点： 1. **硬件需求...
MySQL（事务、索引）&&MyBatis
最新发布
hycccccch的博客
07-19 556
事务指的是一组操作的集合，是一个不可分割的工作单位。事务会将所有的操作作为一个整体一起向系统提交或撤销操作请求，即这些操作要么同时成功，要么同时失败默认MySQL的事务是自动提交，即当执行一条DML语句时，MySQL会立即隐式的提交事务开启事务后运行事务不会对数据改变，commit后才会改变数据如果有命令发生错误，需要进行rollback进行回滚、
【星海随笔】vCenter Server 和主机管理。
weixin_41997073的博客
07-16 211
1.方法：删除页面信息，然后断连这个受管主机，断开受管主机的连接不会将其从 vCenter Server 中移除，而只是临时挂起 vCenter Server 执行的所有监控活动。2.方法：在分布式存储中找到该虚拟设备的存储盘，文件里找到相关的vmdk磁盘文件，点击注册虚拟机。当资料不匹配时候，可以删除展示页面，孤立的设备的 匹配位置的信息。断开后，然后重新连接，既可以重新识别受监管的主机。数据库在Vserver中展示的是一个数据库的资料，应该是client的资料。1.确定为资料不匹配导致的展示问题。
Spring框架之DI依赖注入
G81948577的博客
07-18 585
我们在下面构建spring的过程中体会依赖注入；从上面的图中我们知道，在ssm框架中服务层（server）无法直接操作数据库，持久层（dao）是直接操作数据库进行数据处理的，但是我们如果在服务层有一个持久层的对象，然后我们在服务层通过对象去调用持久层的方法就可以操作数据库了。@OverrideSystem.out.println("持久层，你好");UserServiceImpl类中的代码如下@Override。
深入 Dify 源码，洞察 Dify RAG 核心机制
易迟的专栏
07-17 1123
之前深入源码对 Dify 的完整流程进行了解读，基本上梳理了 Dify 的实现流程与主要组件。但是在实际部署之后，发现 Dify 现有的 RAG 检索效果没有那么理想。因此个人结合前端页面，配置信息与实现流程，深入查看了私有化部署的 Dify 的技术细节。将核心内容整理在这边，方便大家根据实际的业务场景调整 Dify 知识库的配置，或者根据需要进行二次开发调优。
GBase8s数据库SQL语法详解
"GBase8s是一款由南大通用数据技术股份有限公司开发的国产数据库系统，本文档主要介绍了GBase8s的SQL操作语法，适用于需要使用GBase8s数据库的用户。文档包含了SQL语法概述、如何输入SQL语句、SQL注释的输入方法以及...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值