DM数据库学习之路(十八）DMHS数据实时同步软件部署及迁移测试

最新推荐文章于 2024-09-11 17:55:08 发布
最新推荐文章于 2024-09-11 17:55:08 发布
阅读量1.6k 收藏 21
点赞数 21
文章标签： 数据库 学习
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44460848/article/details/136258538
版权

​​​​​

  1. DMDRS介绍

    1. 产品介绍

达梦数据实时同步软件（以下简称 DMDRS）是支持异构环境的高性能、高可靠、高可扩展数据库实时同步复制系统。该产品采用基于日志的结构化数据复制技术，不依赖主机上源数据库的触发器或者规则，对主机源数据库系统几乎无影响，能以极少的系统开销实现秒级数据实时同步复制。

DMDRS基于成熟的关系数据模型和标准接口，支持多种软硬件平台，能够灵活的配置出一对一、一对多、多对一、多对多以及级联等多种形式的复制拓扑结构，可以广泛应用于应急系统、容灾备份、负载均衡、数据移植、联机维护、订阅分发、多业务中心等业务领域。

    1. DMDRS原理

DMDRS的组成原理框图中包含源端数据库、目标端数据库、源端DMDRS服务以及目标端 DMDRS 服务，其中源端DMDRS服务主要由装载模块（LOAD)、日志捕获分析模块（CPT）、传输模块(NET)以及管理服务模块（MGR)组成；

目标端DMDRS服务则由执行模块（EXEC)和管理服务模块(MGR)组成。

在源端DMDRS的CPT模块采用优化的日志扫描算法实现增量日志数据的快速捕获分析，并将分析完成后的日志数据转换为内部的消息格式，然后通过网络将消息发送至目标端DMDRS服务；

在目标端DMDRS服务接收到源端的日志消息后，对消息进行处理，通过多线程并行执行的方式将同步数据应用至目标端数据库，实现数据实时同步。

    1. 模块介绍

DMDRS 同步服务主要包括四个模块，分别是捕获模块(CPT)、装载模块(LOAD)、传输模块(NET)以及执行模块(EXEC)，这些模块统一由管理模块(MGR)进行管理执行。

管理模块(MGR)：MGR模块可以解析配置参数，根据配置参数启动DMDRS的捕获器功能、执行器功能、转发器功能或路由功能。当MGR启动捕获器功能时，MGR会调度CPT模块和NET模块（发送子模块）;当启动执行器功能时，会调度NET模块（接收子模块）和EXEC模块；当启动转发器或路由器功能时，会调度NET模块（接收子模块和发送子模块）。

捕获模块(CPT): 对源数据库增量日志进行捕获并完成解析，结合数据字典信息提取其中数据的变化如插入（INSERT）、删除（DELETE）、修改（UPDATE）和对象操作（DDL），然后将这些操作及数据转换为内部的消息格式投递给网络（NET）模块。

装载模块（LOAD):DMDRS 在进行增量数据同步之前，需完成同步表的字典装载和表数据的初始装载。表字典装载将所有同步表的数据字典信息从源库中抽取出来，保存为本地的数据字典文件，用于数据同步过程中提供准确表定义信息。数据初始装载用于将源端数据库的初始数据同步至目标数据库，使得源库和目标库的初始数据保持一致。

传输模块(NET): 传输模块NET应用于捕获器CPT、路由器ROUTE、转发器 TRANSFER、执行器 EXEC，分为接收子模块（RECV）与发送子模块（SEND），在同步中承担节点之间数据的收发任务。

1) 日志捕获 CPT 模块需要通过 NET 模块来发送数据。

2) EXEC 模块则需要通过 NET 模块接收数据。

3) ROUTE 通过 NET 模块进行消息转发。

4) TRANSFER 通过 NET 模块进行消息转发。

同步链路中多对一、一对多和多对多的数据传输都是通过 NET 模块来实现的。RECV子模块与 SEND 子模块在 DMDRS 配置文件中的位置如下所示：

执行模块(EXEC) EXEC 模块主要的功能是对 CPT 捕获的增量数据进行入库，它目前采用符合 SQL92 标准的 SQL 语句，通过 ODBC 接口和目标端数据库交互（在初始化装载时如果选择快装功能，它需要加载快装模块，快装模块使用了 OCI 接口），所以它可以部署在能够和目标端数据库连通的任意一个节点上。在整个同步链路中，EXEC 模块对整个同步的性能起着决定性的作用，需要根据相应的同步场景配置好 EXEC 模块参数，方可达到最优的同步性能。

  1. DMDRS安装准备

    1. DMDRS部署规划

节点

操作系统

IP地址

数据库类型

源端

麒麟v10SP3

84.0.191.2

DM8单机

目标端

麒麟v10SP3

84.0.191.3

DM8单机

    1. 源目标端DMDRS部署

      1. 查看系统信息

#获取系统位数

# getconf LONG_BIT

64

#查询系统内核

# uname -a

Linux dm8db01 4.19.90-52.22.v2207.ky10.x86_64 #1 SMP Tue Mar 14 12:19:10 CST 2023 x86_64 x86_64 x86_64 GNU/Linux

#检查内存

为了保证 DMDRS 的正确安装和运行，要尽量保证操作系统至少 1GB 的可用内存(RAM)。如果可用内存过少，可能导致 DMDRS 安装或启动失败.

# grep MemTotal /proc/meminfo

MemTotal:       15077112 kB

#获取交换分区大小

# grep SwapTotal /proc/meminfo

SwapTotal:             0 kB

#获取内存使用详情

# free -g

              total        used        free      shared  buff/cache   available

Mem:             15           1          10           0           3          13

Swap:             0           0           0

检查存储空间

# df -h

Filesystem             Size  Used Avail Use% Mounted on

devtmpfs               7.2G     0  7.2G   0% /dev

tmpfs                  7.2G     0  7.2G   0% /dev/shm

tmpfs                  7.2G  9.2M  7.2G   1% /run

tmpfs                  7.2G     0  7.2G   0% /sys/fs/cgroup

/dev/mapper/klas-root   52G   21G   32G  39% /

tmpfs                  7.2G     0  7.2G   0% /tmp

/dev/sda1              295M  155M  141M  53% /boot

tmpfs                  1.5G     0  1.5G   0% /run/user/0

检查临时空间

# df -h /tmp

Filesystem                Size  Used Avail Use% Mounted on

/dev/mapper/h3linux-root  292G  158G  135G  55% /

      1. DMDRS安装

源端和目标端都要安装DMDRS，上传DMDRS的安装包到Linux，使用dmdba用户进行安装包：DMDRS_V4.3.22_dm8_rev141932_rh6_64_20231016.bin

# su - dmdba

$ chmod +x DMDRS_V4.3.22_dm8_rev141932_rh6_64_20231016.bin

$ export DISPLAY=84.0.191.1:0.0

$ ./DMDRS_V4.3.22_dm8_rev141932_rh6_64_20231016.bin

      1. 查看服务状态

通过服务查看器 hsservice 查看已安装的服务

$ /home/dmdba/dmhs/tool/hsservice

    1. 源目标端ODBC部署

全部在root用户下操作

      1. 解压

# tar -zxvf unixODBC-2.3.0.tar.gz

      1. 源码编译安装

# cd /soft/odbc/unixODBC-2.3.0/

# ./configure

# make && make install

      1. 配置 odbc.ini

配置 odbc.ini 数据源信息和 odbcinst.ini 驱动信息

# vi /usr/local/etc/odbc.ini

[DM8]

Description = DM ODBC DSN

Driver = DM8 ODBC DRIVER

SERVER = localhost

UID = SYSDBA

PWD = SYSDBA

TCP_PORT = 5236

      1. 配置 odbcinst.ini

# vi /usr/local/etc/odbcinst.ini

[DM8 ODBC DRIVER]

Description = ODBC DRIVER FOR DM8

Driver = /dm8/bin/libdodbc.so

注：这里根据实际安装路径填写，要不然找不到libdodbc.so

      1. 验证

使用dmdba用户执行命令

# su – dmdba

$ isql dm8 -v

或者

$ isql dm8

  1. 源端数据库准备

    1. 开启归档

$ mkdir -p /dm8/data/DAMENG/arch

$ disql SYSDBA/SYSDBA@127.0.0.1:5236

SQL> alter database mount;//切换数据库到配置状态

SQL> alter database add ARCHIVELOG 'type=local,dest=/dm8/data/DAMENG/arch,file_size=1024,space_limit=0';

SQL> alter database ARCHIVELOG;

SQL> alter database open;

SQL> select arch_mode from v$database;

LINEID     ARCH_MODE

---------- ---------

Y

SELECT ARCH_DEST, ARCH_FILE_SIZE FROM SYS.V$DM_ARCH_INI WHERE ARCH_TYPE='LOCAL'

AND ARCH_IS_VALID='Y';

行号     ARCH_DEST             ARCH_FILE_SIZE

---------- --------------------- --------------

1          /dm8/data/DAMENG/arch 1024

    1. 逻辑日志

vi /dm8/data/DAMENG/dm.ini

ARCH_INI = 1

RLOG_APPEND_LOGIC = 1

SQL> SELECT PARA_VALUE FROM SYS.V$DM_INI WHERE PARA_NAME = 'RLOG_APPEND_LOGIC';

行号     PARA_VALUE

---------- ----------

  1. 1

检查在线日志

SQL> SELECT PATH FROM SYS.V$RLOGFILE;

行号     PATH                        

---------- -----------------------------

1          /dm8/data/DAMENG/DAMENG01.log

2          /dm8/data/DAMENG/DAMENG02.log

检查 FAST_COMMIT 参数是否为 0

SQL> select PARA_NAME,para_value from v$dm_ini where para_name = 'FAST_COMMIT';

行号     PARA_NAME   PARA_VALUE

---------- ----------- ----------

1          FAST_COMMIT 0

    1. 配置DDL辅助表和触发器

      1. 方式一(执行ddl_sql_dm8.sql)

如果要求 DDL 同步，那么需要创建DDL触发器和辅助表，使用SYSDBA连接登录数据库执行DMDRS安装目录下script子目录的“ddl_sql_dm8.sql”脚本。

$ disql SYSDBA/SYSDBA@127.0.0.1:5236

SQL> start /home/dmdba/DMHS/scripts/ddl_sql_dm8.sql

执行完成后，使用以下SQL语句查询辅助表是否创建成功

select owner, table_name from dba_tables where owner = 'SYSDBA' and table_name like 'DMDRS%' and status = 'VALID';

行号 OWNER TABLE_NAME

---------- ----------- ----------------

1 SYSDBA DMDRS_DDL_COL

2 SYSDBA DMDRS_DDL_SQL

3 SYSDBA DMDRS_DDL_CONS

4 SYSDBA DMDRS_DDL_IDX

5 SYSDBA DMDRS_DDL_RENAME

6 SYSDBA DMDRS_DDL_SEQ

7 SYSDBA DMDRS_DDL_PART

8 SYSDBA DMDRS_DDL_COMMENT

9 SYSDBA DMDRS_DDL_LOG

执行以下SQL语句查询触发器是否创建成功：

select owner, trigger_name from dba_triggers where owner = 'SYSDBA' and trigger_name like 'DMDRS%' and status = 'Y';

行号 OWNER TRIGGER_NAME

---------- ------ -----------------------

1 SYSDBA DMDRS_DDL_TRIGGER_AFTER

2 SYSDBA DMDRS_DDL_TRIGGER_BEFORE

3 SYSDBA DMDRS_DDL_TRIGGER_GRANT

4 SYSDBA DMDRS_DDL_TRIGGER_REVOKE

      1. 方式二系统表日志方式（视需求启用）

另外一种方式同步 DDL：系统表附加日志的方式同步 DDL，该方式同步 DDL 时，只能同步常规对象，如：table、index、constraint、trigger、procedure、function、view、sequence；对应的操作类型：create、drop、alter、truncate。同时，不支持分区表。系统表附加日志方式同步 DDL 的配置方法为：将 DM8 数据库的配置文件“dm.ini”中的“RLOG_APPEND_SYSTAB_LOGIC”设置为 1，再重启数据库实例即可。

$ vi /dm8/data/DAMENG/dm.ini

RLOG_APPEND_SYSTAB_LOGIC     = 1

$ ./DmServiceDMSERVER restart

Stopping DmServiceDMSERVER:                                [ OK ]

Starting DmServiceDMSERVER:                                [ OK ]

  1. DMDRS配置

    1. 目标端配置

      1. 目标端dmhs.hs配置

在DMDRS安装目录下的bin子目录，新建dmhs.hs配置文件

$ cd /home/dmdba/dmhs/bin

$ vi dmhs.hs

<?xml version="1.0" encoding="GB2312"?>

<DMDRS>

 <base>    <!-- 管理模块的基本配置 -->

    <lang>en</lang>    <!-- 语言选项,ch 为中文,en 为英文 -->

    <mgr_port>5345</mgr_port>    <!-- 管理端口号，默认为5345-->

    <ckpt_interval>60</ckpt_interval>    <!-- 检查点间隔，默认60 -->

    <siteid>2</siteid>    <!-- 站点ID，这个ID配置时要注意，全局唯一，最小值0，最大值65535 -->

    <version>2.0</version>

</base>

<exec>    <!-- 执行模块的基本配置 -->

  <recv>

    <data_port>5346</data_port>    <!-- 当数据传递采用网络直连时，需要配置该参数，表明同步数据从该端口号获取。 -->

  </recv>

  <db_type>dm8</db_type>    <!-- 目标端数据库类型 -->

  <db_server>84.0.191.3</db_server>    <!-- 目标端IP即当前IP -->

  <db_user>SYSDBA</db_user>    <!-- 目标端数据库用户 -->

  <db_pwd>SYSDBA2023</db_pwd>    <!-- 用户的密码 -->

  <db_port>5236</db_port>    <!-- 目标端数据库端口 -->

  <db_name>CUGDB</db_name>    <!-- 默认数据库名，默认为空串(只针对dm6有用)-->

  <char_code>PG_GB18030</char_code>

  <exec_thr>4</exec_thr>    <!-- 执行线程个数，只有当 exec_mode 为 1 时才会生效!默认为1 -->

  <exec_sql>1024</exec_sql>    <!-- SQL 缓存大小，默认为 512M -->

  <exec_trx> 5000 </exec_trx>    <!-- 事务缓存个数，默认为 5000 -->

  <exec_rows>1000</exec_rows>    <!-- 批量绑定行数，默认为 250 -->

 </exec>

</DMDRS>

      1. 启动目标端MGR

$/home/dmdba/dmhs/bin/dmhs_server dmhs.hs

      1. 启动目标端执行器

start exec

或者

控制台DMDRS_console 控制台管理工具启动

$ /home/dmdba/dmhs/tool/DMDRS_console

DMDRS console tool: V4.3.22-Build(2023.10.13-141932trunc)_64_2310

Copyright (c) 2020, DMDRS. All rights reserved.

Type ? or "help" for help, type "quit" to quit console.

Connected to DMDRS: 127.0.0.1:5345

execute success

Dameng HS Server V4.3.22-Build(2023.10.13-141932trunc)_64_2310

DMDRS> start exec

execute success

    1. 源端配置

      1. 配置源端Dmhs.hs

在DMDRS安装目录下的bin子目录，新建Dmhs.hs配置文件

$ vi /home/dmdba/dmhs/bin/dmhs.hs

<?xml version="1.0" encoding="GB2312"?>

<DMDRS>

 <base>

<lang>ch</lang>

 <mgr_port>5345</mgr_port>

 <ckpt_interval>60</ckpt_interval>

 <siteid>1</siteid>

<version>2.0</version>

 </base>

 <cpt>

 <db_type>dm8</db_type>

 <db_server>127.0.0.1</db_server>

 <db_user>SYSDBA</db_user>

 <db_pwd>SYSDBA</db_pwd>

 <db_port>5236</db_port>

 <db_ssl_path></db_ssl_path>

 <db_ssl_pwd></db_ssl_pwd>

 <parse_thr>1</parse_thr>

 <ddl_mask>op:obj:TABLESPACE </ddl_mask> <!--DDL配置项，如果不需要DDL同步，配置为空-->

 <arch><!--归档清理配置项-->

 <clear_interval>600</clear_interval>

 <clear_flag>0</clear_flag>

 </arch>

 <send><!-- 发送模块配置 -->

 <ip>84.0.191.2</ip><!—执行端 IP-->

 <mgr_port>5345</mgr_port><!—执行端 mgr_port -->

 <data_port>5346</data_port> <!—执行端 data_port -->

 <trigger>1</trigger><!-- 是否忽略触发器，默认为 0，限定值 0,1 -->

 <constraint>1</constraint><!-- 是否忽略约束，默认为 0，限定值 0,1 -->

 <identity>1</identity>

 <net_turns>0</net_turns>

 <filter><!--过滤配置项-->

 <enable><!-- 白名单，所有允许同步的表 -->

<item>OMP.*</item>

 </enable>

 </filter>

 <map><!--映射配置项-->

 <item>OMP.*==OMP.*</item><!--*.*是抽取整个库-->

 </map>

 </send>

 </cpt>

</DMDRS>

配置说明：

1) siteid全局唯一，即 DMDRS 同步系统涉及的所有节点的 siteid 必须全局唯一，不允许有重复值。

2) DDL配置项 ， 如果不需要DDL同步 ， 那么就配置为空 ， 即<ddl_mask></ddl_mask>，相应地DMDRS DDL触发器和辅助表也不需要创建。

3) 归档清理配置项，clear_flag为1表示清除，即DMDRS将同步完成的归档文件删除；为 2，表示将同步完成的归档移到bak_dir目录下；为 0，表示不作任何操作。

4) 过滤配置项，本示例配置了白名单，即 enable，也可以配置黑名单，详见 DMDRS

用户手册。其过滤的规则是：先判断白名单，然后判断黑名单。如果存在重叠的情况，那么也是会被过滤的。

5) 映射配置项，表示存在不同模式之间的表同步，例如本示例中源端的 SYSDBA 模式下的表映射成目的端的 DMDRS 模式下同名的表。

      1. 启动源端MGR

$/home/dmdba/dmhs/bin/dmhs_server dmhs.hs

clear exec lsn #为了初始化日志的起始位置。

      1. 初始化装载

初始装载是将源端数据库中的初始数据装载到目的端数据库，使 DMDRS 同步的时刻源和目的端的同步表数据一致。装载前源端DMDRS服务和目的端DMDRS服务都需要开启。

初始装载：

$/home/dmdba/dmhs/tool/dmhs_console

DMDRS >copy 0 "sch.name='OMP'" DICT|LSN|CREATE|INSERT|INDEX

      1. 启动捕获器

DMDRS_server 控制台启动(本地)

start cpt

显示如上界面表示启动成功

或者

控制台DMDRS_console 控制台管理工具启动

[dmdba@dm8db01 tool]$ /home/dmdba/DMHS/tool/DMDRS_console

DMDRS console tool: V4.3.22-Build(2023.10.13-141932trunc)_64_2310

Copyright (c) 2020, DMDRS. All rights reserved.

Type ? or "help" for help, type "quit" to quit console.

Connected to DMDRS: 127.0.0.1:5345

execute success

Dameng HS Server V4.3.22-Build(2023.10.13-141932trunc)_64_2310

DMDRS> start cpt

execute success

DM到DM的DMDRS部署完成！

  1. DMDRS测试

    1. 表数量比对

结论：源端和目标端表名称及表数量一致。

    1. 存量表行数比对

结论：源端和目标端存量数据表行数一致。

    1. 新增表行数比对

begin

for i in 101000..102000 loop

insert into omp.year_2001 values(i, 'cisco-'||i,'3306','10000','router-'||i,to_date('2021-06-20 18:31:34','YYYY-MM-DD HH24:MI:SS'));

end loop;

commit;

end;

/

结论：源端和目标端表新增数据行数一致。

    1. 建新表及表行数比对

create table omp.year_6688(

ID            number(10) primary key not null,            

name       varchar(30),

port    VARCHAR(255),

speed    VARCHAR(255),

type    VARCHAR(255),

create_time     date

);

begin

for i in 1..5000 loop

insert into omp.year_6688 values(i, 'cisco-'||i,'3306','10000','router-'||i,to_date('2021-06-20 18:31:34','YYYY-MM-DD HH24:MI:SS'));

end loop;

commit;

end;

/

结论：源端和目标端新增表及表行数一致。

    1. 全库抽取测试

修改源端配置文件

$ vi /home/dmdba/dmhs/bin/dmhs.hs

<map><!--映射配置项-->

<item>*.*==*.*</item><!--*.*是抽取整个库-->

</map>

    1. schema抽取测试

$ vi /home/dmdba/dmhs/bin/dmhs.hs

<map><!--映射配置项-->

<item>FMS.*==FMS.*</item><!—用户名.*-->

</map>

    1. 指定表抽取测试

$ vi /home/dmdba/dmhs/bin/dmhs.hs

<map><!--映射配置项-->

<item>DWD.YEAR_2001==DWD.YEAR_2001</item><!—用户.表名-->

<item>DWD.YEAR_2002==DWD.YEAR_2002</item><!—用户.表名-->

<item>DWD.YEAR_2003==DWD.YEAR_2003</item><!—用户.表名-->

</map>

    1. 表空间抽取测试

$ vi /home/dmdba/dmhs/bin/dmhs.hs

<map><!--映射配置项-->

 <item>TS.OMPDB==TS.FMSDB</item><!--源端表空间OMPDB映射到目的端FMSDB表空间-->

 </map>

花开花落别来无恙
关注
DM 数据实时同步系统搭建(DM8单机)
weixin_49109748的博客
08-28 632
DMHS搭建操作步骤 1、新建两个数据库实例，创建后两个库都完成一次正常启停；(注册并开启服务) 新建实例：./dminit path=/home/dmdba/dmdbms/data 数据库启停：./dmserver /home/dmdba/dmdbms/data/DAMENG/dm.ini 2、要搭建HS数据同步，需要在源端开启归档和逻辑日志； 2.1 设置归档标记和逻辑日志标记。打开 DM7 服务器配置文件“dm.ini”，设置如下值： ARCH_INI = 1 RLOG_APPEND_LOGIC =
达梦DMHS异构数据库数据实时同步软件速知
lucky_fly的专栏
03-12 4503
DMHS简介 DMHS(Heterogeneous database Synchronization for DM)是达梦数据库公司推出的一款异构数据库数据实时同步工具软件。同步源端支持ORACLE系列、达梦系列、DB2、MySQL、PostgreSQL、SQL SERVER数据库，同步目的端支持通过ODBC接口访问的数据库。 DMHS主要功能 DMHS主要有两种功能： 数据装载（copy） 和数...
手把手教你达梦数据实时同步软件 (DMHS)的安装和使用（附实战详细记录：本地模拟实现达梦数据库双活、灾备）
热门推荐
weixin_42082084的博客
05-07 1万+
系列文章目录 文章目录系列文章目录前言环境一、DMHS的安装 （命令行）1、安装文件准备2、修改可执行文件后执行安装程序二、DM8数据库准备工作1、开启归档日志2、开启逻辑日志3、配置 DDL辅助表和触发器4、创建DMHS软件连接数据库的用户三、DMHS双向同步配置节点1 DMHS服务配置节点2 DMHS服务配置一个简单地使用例子四、关闭达梦ETL服务总结 前言 本次模拟实验主要在本地两台虚拟机上，安装dm8数据库，并通过DMHS软件实现双向同步，达到双活、灾备效果。（以下主要展开DMHS的安装和配置，
DMDRS学习
最新发布
qq_53673794的博客
09-11 1036
本章主要介绍DMDRS工具，从概念到模块都有讲到
DMHS同步数据库
ditouqianxiao4的博客
02-21 280
DMHS同步数据库 演示环境概述 本次演示同构dm7数据库之间通过DMHS异构同步软件进行数据库同步 产品版本：dm7，dmhs_V3.1.3_dm7， 操作系统版本：Centos7, 关闭防火墙，关闭selinux 环境准备 准备两台服务器，dm7数据库已经安装完毕，实例创建完毕 源端IP地址：192.168.61.110，目的端IP地址：192.168.61.120 DMHS软件安装 1） 在dmdba用户下，使用命令行或者图形化界面安装都可以，两台服务器都要安装，这里安装在/DMHS 2） 选择完整
【达梦8】mysql迁移测试
weixin_45335507的博客
07-02 895
（1）分析待移植系统，确定移植对象（2）通过数据迁移工具DTS完成常规数据库对象以及数据的迁移（3）DM 数据库和 MySQL 体系结构上存在差异，SQL 语法也存在一定的差异（4）移植完成后对移植的结果进行校验，确保移植的完整性和正确性（5）对应用系统进行移植、测试和优化。
DMHS单向同步
weixin_45375734的博客
09-27 266
DMHS单向同步 DMHS是一款基于日志分析的数据库实时同步系统，DMHS的捕获功能(捕获器)是对源端的在线日志或归档日志进行解析并发送出去；DMHS的转发功能(转发器)是对基于本地文件、网络、FTP的数据进行过滤机应用层传输；DMHS的路由功能(路由器)是对跨网关的数据进行网络层传输；DMHS的执行功能(执行器)是通过ODBC接口连接目的端的数据库管理系统并接受数据。 源端： 检查源端数据库是否开启归档日志、逻辑追加日志；如果需要DDL同步，还需要执行DMHS提供的SQL脚本。 1.1开启归档和逻辑日志
达梦实时同步软件DMHS搭建（DM6到DM6）
qq_24843349的博客
06-29 1569
1.DMHS简介： 达梦自主可控柔性替代方案关键在于达梦实时同步工具（DMHS）。DMHS是一个支持异构环境的高性能、高可靠和高可扩展的数据库实时同步系统。可以在不同的关系数据库之间，完成近乎实时的数据同步功能，保证目的端数据库与源端数据库的数据一致。主要有两种功能：数据装载（copy）和数据实时同步。copy功能可以做类似DTS工具的事情，可以迁移表结构、外键约束、check约束、索引。在部署DMHS时，如果源端数据库一直运行，则需要用DMHS进行初始数据迁移。至于表结构迁移可以使用 DMHS、DT
(11)达梦DMHS技术原理及应用介绍
idmon的博客
07-05 2134
在上一篇博客里，我们对达梦数据库MPP大规模并行处理集群进行了动手部署实践。本篇技术分享文章是对达梦DMHS技术原理的学习。数据实时同步软件(DMHS)简介达梦数据实时同步软件(DMHS)是支持异构环境的高性能、高可靠、高可扩展数据库实时同步复制系统。...
DMHS同步oracle19c到dm8（二）
weixin_43775431的博客
11-16 1215
这是夜说的第五篇学习文章，搭建dmhs从oracle19c单实例同步数据到dm8单实例，并配置达梦数据库数据同步管理平台。
DMhs部署 oracle-dm
weixin_43642661的博客
09-28 259
当源端oracle，日志存储在FS模式下面时，需要申请对应操作系统源端为oracle的dmhs版本。 目的端为DM7时，需要申请对应操作系统的执行端为dm7的dmhs版本。 1.环境检查 1.1 源端环境检查 1）用户检查 （1）运行用户 运行用户的要求，要求使用oracle用户或者和oracle同一组的用户，一般系统如果有oracle用户权限控制，则要求给出一个和oracle同组的用户。 检查用户属主 [dmhs@slb ~]$ id uid=504(dmhs) gid=505(dmhs) 组=505(d
DMHS单机实时同步（DM7）
weixin_43459159的博客
09-24 558
DMHS单机实时同步（DM7） 前言 DMHS 支持的操作系统平台：Windows 系列（包括 XP、Win2003、Win7/8/10、WinServer2008等），Linux（Redhat、Ubuntu、CentOS、Kylin、Rocky 等）、Aix、Solaris 等。内存要求：DMHS 需要的内存总量取决于执行的分析线程以及执行线程的并发数，最少需要 1G 内存。磁盘需求：DMHS 安装文件占用 277M，包括了管理工具以及管理界面占用的空间，另外需要一些额外的空间存储 DMHS 运行的日志文
配置DMHS实时同步（DM＞＞DM）
qq_45222081的博客
09-25 720
Dmhs(dm->dm)安装部署
配置DMHS同步工具（oracle-达梦）
qq_44236935的博客
06-30 922
配置dmhs工具同步
单机数据库DMHS数据同步搭建（DM--＞DM）
beatlove123的博客
01-25 872
单机数据库DMHS数据同步搭建（DM-->DM）一级目录二级目录三级目录一、DMHS介绍二、环境说明三、达梦数据库安装四、DMHS软件安装五、修改数据库参数六、配置源端数据库归档模式七、检查相关配置是否生效八、配置DDL同步九、配置dmhs.hs文件十、启动DMHS程序并进行数据装载十一、启动数据实时同步十二、检查数据同步 一级目录 二级目录 三级目录 一、DMHS介绍 二、环境说明 IP 端口 备注 源端 192.168.189.145 5236 cpt 目标端 192.1
TIDB-dm-数据同步初步搭建
line_on_database的博客
03-24 2252
一、参数 tiup dmctl --help Usage: dmctl [global options] command [command options] [arguments...] Available Commands: check-task check-task <config-file> # 检查任务的配置文件 get-config get-config <task | master | worker | source> <na
达梦数据库搭建Oracle-dm8数据同步（dmhs）
weixin_42447367的博客
08-29 947
源端：是否开启数据库管理系统的归档日志、附加日志； 如果需要DDL同步，还需要检查是否关闭数据库管理系统的回收站。 检查归档日志是否开启 SQL> archive log list; 归档未开启的话，开启归档 首先以sysdba用户登录数据库，开启数据库服务。 [oracle@redhat ~]$ sqlplus /nolog SQL> conn sys/orcl as sysdba SQL> startup 关闭数据库 SQL> shutdown normal 用startup m
dmhs oracle11G同步dm8
weixin_45767067的博客
12-11 251
1 oracle开启归档切换用户（尽量使用以下带 - 的方式切换用户）创建目录连接数据库# 关闭数据库服务# 以 mount 方式启动 oracle 数据库# 开启归档# 设置归档文件路径（如果使用本地路径存放归档日志，需要将 db_recovery_file_dest 参数置空，然后设置 log_archive_dest 参数# 恢复为 open 状态# 再次检查归档4.2 开启附加日志。
DMHS数据实时同步系统搭建指南
DMHS（达梦数据实时同步系统）是一款用于数据迁移和实时同步的软件，适用于大数据环境下的实时数据流动需求。在DMHS搭建过程中，DM8作为源端，可以设置为单机模式，适合简单的数据同步需求；主备或读写分离模式则...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值