DMHS路由功能体验

最新推荐文章于 2022-07-13 09:51:52 发布
最新推荐文章于 2022-07-13 09:51:52 发布
阅读量217 收藏 2
点赞数
分类专栏： 达梦数据库 DMHS 路由 文章标签： 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/whbravo/article/details/117264798
版权
达梦数据库 同时被 3 个专栏收录
7 篇文章 3 订阅
订阅专栏
DMHS
1 篇文章 0 订阅
订阅专栏
路由
1 篇文章 0 订阅
订阅专栏

一、前言

近期遇到用户四台机器，两两相通，不存在三台之间互相联通的情况，并且数据只能在首尾节点进行同步，中间两个节点只作为转发器的作用，由此引申本次利用dmhs去同步两台达梦之间的数据需求。
架构：

二、具体架构步骤

在这里插入图片描述

2.1 首先介绍DMHS：

在这里插入图片描述
达梦的DMHS和oracl的OGG原理相似，都是由CPT模块从数据库的日志中捕获变化，然后进行压缩后SEND模块发送到目的端，再在目的端EXEC模块执行相同操作的一个过程实现数据的同步，目前DMHS不仅支持达梦之间的同步，也能支持常用的几个通用数据库的数据同步。

2.2 该项目具体的思路：

A段和B段的DMHS正常配置cpt和exec，C和D段的dmhs配置route模块；A的send 配置C，C的send 配置A和D，D的send配置C和B，B的send配置D，从而实现AB之间数据的双向同步，由CD进行消息的转发；

2.3 dmhs.hs配置(dmhs.hs为实现dmhs同步功能的具体模块参数配置文件)

A-192.168.216.137

<?xml version="1.0" encoding="GB2312"?>
<dmhs>
    <base>
        <lang>en</lang>
        <mgr_port>5345</mgr_port>
        <ckpt_interval>60</ckpt_interval>
        <siteid>1</siteid>
        <version>2.0</version>
</base>
        <exec>
<recv>
            <mgr_port>5345</mgr_port>
            <data_port>5346</data_port>
        </recv>
            <db_type>DM7</db_type>
            <db_server>127.0.0.1</db_server>
            <db_user>SYSDBA</db_user>
            <db_pwd>SYSDBA</db_pwd>
            <db_port>5236</db_port>
            <exec_thr>4</exec_thr>
            <exec_sql>1024</exec_sql>
            <affect_row>0</affect_row>
            <enable_rowid>0</enable_rowid>
            <exec_trx>5000</exec_trx>
            <exec_rows>1000</exec_rows>
            <case_sensitive>1</case_sensitive>
            <toggle_case>0</toggle_case>
            <exec_policy>2</exec_policy>
        </exec>
    <cpt>
        <db_type>DM7</db_type>
        <db_server>127.0.0.1</db_server>
        <db_user>SYSDBA</db_user>
        <db_pwd>SYSDBA</db_pwd>
        <db_port>5236</db_port>
        <idle_time>10</idle_time>
    <ddl_mask>op:obj:rec</ddl_mask>
        <arch>
            <clear_interval>600</clear_interval>
            <clear_flag>0</clear_flag>
        </arch>
        <send>
            <ip>192.168.216.138</ip>
            <mgr_port>5566</mgr_port>
            <data_port>5565</data_port>
            <net_pack_size>256</net_pack_size>
            <net_turns>0</net_turns>
            <crc_check>0</crc_check>
            <trigger>0</trigger>
            <constraint>0</constraint>
            <identity>0</identity>
            <filter>
                <enable>
		<item>*.*</item>
                </enable>
                <disable/>
            </filter>
            <map>
                <item>*.* == *.*</item>
            </map>
        </send>
    </cpt>
</dmhs>

C-192.168.216.138

<?xml version="1.0" encoding="GB2312"?>
<dmhs>
<base><!-- 管理模块的基本配置 -->
<lang>ch</lang><!-- 语言选项,ch为中文,en为英文 -->
<version>2.0</version>
<mgr_port>5345</mgr_port><!-- 管理端口号，默认为5345，最小值1000，最大值65535 -->
<chk_interval>2</chk_interval><!-- 状态轮询间隔，默认为3s，最小值1s，最大值60s -->
<siteid>2</siteid><!-- 站点ID，这个ID配置时要注意，全局唯一，最小值0，最大值65535 -->
</base>
<route><!-- 消息路由可以实现N==>1==>N的功能，主要是用来跨网关，路由是不会对消息进行拆解的，实现的是消息实现源和目的的映射关系 -->
<recv>
<mgr_port>5566</mgr_port>
<data_port>5565</data_port>
</recv>
<send><!-- 发送模块配置 -->
<siteid>1</siteid><!-- 这个站点号跟源端的站点号要一致 -->
<ip>192.168.216.139</ip><!-- 目的端IP，默认127.0.0.1 -->
<mgr_port>5566</mgr_port><!-- 目的端管理端口，默认为5345，最小值1000，最大值65535 -->
<data_port>5565</data_port><!-- 目的端数据接收端口号，默认为5346，最小值1000，最大值65535 -->
</send>
<send><!-- 发送模块配置 -->
<siteid>4</siteid><!-- 这个站点号跟源端的站点号要一致 -->
<ip>192.168.216.137</ip><!-- 目的端IP，默认127.0.0.1 -->
<mgr_port>5345</mgr_port><!-- 目的端管理端口，默认为5345，最小值1000，最大值65535 -->
<data_port>5346</data_port><!-- 目的端数据接收端口号，默认为5346，最小值1000，最大值65535 -->
</send>
</route>
</dmhs>

D-192.168.216.139

<?xml version="1.0" encoding="GB2312"?>
<dmhs>
<base><!-- 管理模块的基本配置 -->
<lang>ch</lang><!-- 语言选项,ch为中文,en为英文 -->
<version>2.0</version>
<mgr_port>5345</mgr_port><!-- 管理端口号，默认为5345，最小值1000，最大值65535 -->
<chk_interval>2</chk_interval><!-- 状态轮询间隔，默认为3s，最小值1s，最大值60s -->
<siteid>3</siteid><!-- 站点ID，这个ID配置时要注意，全局唯一，最小值0，最大值65535 -->
</base>
<route><!-- 消息路由可以实现N==>1==>N的功能，主要是用来跨网关，路由是不会对消息进行拆解的，实现的是消息实现源和目的的映射关系 -->
<recv>
<mgr_port>5566</mgr_port>
<data_port>5565</data_port>
</recv>
<send><!-- 发送模块配置 -->
<siteid>1</siteid><!-- 这个站点号跟源端的站点号要一致 -->
<ip>192.168.216.140</ip><!-- 目的端IP，默认127.0.0.1 -->
<mgr_port>5345</mgr_port><!-- 目的端管理端口，默认为5345，最小值1000，最大值65535 -->
<data_port>5346</data_port><!-- 目的端数据接收端口号，默认为5346，最小值1000，最大值65535 -->
</send>
<send><!-- 发送模块配置 -->
<siteid>4</siteid><!-- 这个站点号跟源端的站点号要一致 -->
<ip>192.168.216.138</ip><!-- 目的端IP，默认127.0.0.1 -->
<mgr_port>5566</mgr_port><!-- 目的端管理端口，默认为5345，最小值1000，最大值65535 -->
<data_port>5565</data_port><!-- 目的端数据接收端口号，默认为5346，最小值1000，最大值65535 -->
</send>
</route>
</dmhs>

B-192.168.216.140

<?xml version="1.0" encoding="GB2312"?>
<dmhs>
    <base>
        <lang>en</lang>
        <mgr_port>5345</mgr_port>
        <ckpt_interval>60</ckpt_interval>
        <siteid>4</siteid>
        <version>2.0</version>
</base>
        <exec>
<recv>
            <mgr_port>5345</mgr_port>
            <data_port>5346</data_port>
        </recv>
            <db_type>DM7</db_type>
            <db_server>127.0.0.1</db_server>
            <db_user>SYSDBA</db_user>
            <db_pwd>SYSDBA</db_pwd>
            <db_port>5236</db_port>
            <exec_thr>4</exec_thr>
            <exec_sql>1024</exec_sql>
            <affect_row>0</affect_row>
            <enable_rowid>0</enable_rowid>
            <exec_trx>5000</exec_trx>
            <exec_rows>1000</exec_rows>
            <case_sensitive>1</case_sensitive>
            <toggle_case>0</toggle_case>
            <exec_policy>2</exec_policy>
        </exec>
    <cpt>
        <db_type>DM7</db_type>
        <db_server>127.0.0.1</db_server>
        <db_user>SYSDBA</db_user>
        <db_pwd>SYSDBA</db_pwd>
        <db_port>5236</db_port>
        <idle_time>10</idle_time>
    <ddl_mask>op:obj:rec</ddl_mask>
        <arch>
            <clear_interval>600</clear_interval>
            <clear_flag>0</clear_flag>
        </arch>
        <send>
            <ip>192.168.216.139</ip>
            <mgr_port>5566</mgr_port>
            <data_port>5565</data_port>
            <net_pack_size>256</net_pack_size>
            <net_turns>0</net_turns>
            <crc_check>0</crc_check>
            <trigger>0</trigger>
            <constraint>0</constraint>
            <identity>0</identity>
            <filter>
                <enable>
		<item>*.*</item>
                </enable>
                <disable/>
            </filter>
            <map>
                <item>*.* == *.*</item>
            </map>
        </send>
    </cpt>
</dmhs>

说明：
上述dmhs.hs中A的siteid是1，它向C投递包含siteid为1的日志，C再向D投递siteid为1的日志，最后D向B投递siteid为1的日志并执行，反之亦然，从下面的C的dmhs.hs片段配置中看recv指的是转发路由自身接收数据使用的端口，所以A的dmhs.hs中send发送的端口应该就是这里C的recv的端口，5566和5565。
A

<send>
            <ip>192.168.216.138</ip>
            <mgr_port>5566</mgr_port>
            <data_port>5565</data_port>

另外1指的是把siteid=1也就是A的数据投递到D上，所以下方send中的端口应该是D的recv端口,5566和5565。
C

<recv>
<mgr_port>5566</mgr_port>
<data_port>5565</data_port>
</recv>
<send><!-- 发送模块配置 -->
<siteid>1</siteid><!-- 这个站点号跟源端的站点号要一致 -->
<ip>192.168.216.139</ip><!-- 目的端IP，默认127.0.0.1 -->
<mgr_port>5566</mgr_port><!-- 目的端管理端口，默认为5345，最小值1000，最大值65535 -->
<data_port>5565</data_port><!-- 目的端数据接收端口号，默认为5346，最小值1000，最大值65535 -->
</send>

D再把siteid=1的数据投递到B上执行，所以D上1下方send中的端口号应该就是B上的exec模块的端口5345和5346
D

<recv>
<mgr_port>5566</mgr_port>
<data_port>5565</data_port>
</recv>
<send><!-- 发送模块配置 -->
<siteid>1</siteid><!-- 这个站点号跟源端的站点号要一致 -->
<ip>192.168.216.140</ip><!-- 目的端IP，默认127.0.0.1 -->
<mgr_port>5345</mgr_port><!-- 目的端管理端口，默认为5345，最小值1000，最大值65535 -->
<data_port>5346</data_port><!-- 目的端数据接收端口号，默认为5346，最小值1000，最大值65535 -->
</send>

B

<exec>
<recv>
            <mgr_port>5345</mgr_port>
            <data_port>5346</data_port>
        </recv>

2.4 启动服务

启动每个节点的dmhs_server
1、ABCD正常安装dmhs
2、CD的console执行下面命令用于启动路由转发功能

connect
start recv

3、AB的console执行:启动捕获和执行模块

connect
start exec
clear exec lsn
copy 0 "sch.name is not null" dict
start cpt

下面就可以愉快的测试在A上插入数据B上是否能接受到数据啦。

三、结语

DMHS作为强大的同步工具，支持一对一，一对多，多对一，单向，双向，线型，环形同步，日常中能满足我们几乎大部分的同步需求。

辉泽
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
DMHS配置参数及各个模块的使用介绍
m0_72514662的博客
09-03 961
以上就是本文的内容，主要介绍了 dmhs.hs 配置文件和各个模块的配置与使用。如有错误，欢迎指正。
DM8-DM8通过DMHS数据同步
Apple_First的博客
11-27 753
初步学习了一下达梦的dmhs同步工具，本人觉得还是很好用的，下面为大家详细介绍一下我在自己的虚拟机上搭建的过程。 环境信息 1.1 源端库 IP地址 192.168.163.133 操作系统版本 中标麒麟7.4 操作系统登录信息 root/123 dmdba/123 达梦数据库安装包 dm8_setup_rh7_64_ent_8.1.1.56_20191223.iso 1.2 目的端库 IP地址 192.168.163.134 操作系统版本 中标麒麟7.4 操作系统登录信息 root/123 ..
2021-01-18
qq_42770030的博客
01-18 150
DM8-DM8单实例数据库DMHS部署搭建 一、DMHS软件概述 DMHS全称是Heterogeneous database Synchronization for DM，即达梦异构数据库同步软件。DMHS是基于数据库日志，支持同构、异构数据库的实时同步软件，可以实现双业务中心架构。DMHS软件功能非常丰富，支持多种架构场景，主流数据实时同步软件的相关功能DMHS都已实现并且根据实际业务需求丰富了更多功能。主流的数据实时同步软件主要有：Oracle、GoldenGate、DSG RealSync、Quest
达梦实时同步软件DMHS搭建（DM6到DM6）
qq_24843349的博客
06-29 1463
1.DMHS简介： 达梦自主可控柔性替代方案关键在于达梦实时同步工具（DMHS）。DMHS是一个支持异构环境的高性能、高可靠和高可扩展的数据库实时同步系统。可以在不同的关系数据库之间，完成近乎实时的数据同步功能，保证目的端数据库与源端数据库的数据一致。主要有两种功能：数据装载（copy）和数据实时同步。copy功能可以做类似DTS工具的事情，可以迁移表结构、外键约束、check约束、索引。在部署DMHS时，如果源端数据库一直运行，则需要用DMHS进行初始数据迁移。至于表结构迁移可以使用 DMHS、DT
nodejs中实现路由功能
10-24
主要介绍了nodejs中实现路由功能,顾名思义,路由指的就是我们要针对不同的URL有不同的处理方式,本文将教你在node.js中实现路由功能,需要的朋友可以参考下
CP443路由功能f
04-02
介绍了关于CP443路由功能f的详细说明，提供其它知识的技术资料的下载。
Angularjs制作简单的路由功能demo
10-24
主要介绍了Angularjs制作简单的路由功能demo，刚刚开始学习Angularjs,做的不好，还请见谅。
nodeJS实现路由功能实例代码
10-19
本篇文章主要介绍了nodeJS实现路由功能实例代码，小编觉得挺不错的，现在分享给大家，也给大家做个参考。一起跟随小编过来看看吧
支付路由功能需求文档V1.0.0.docx
03-29
支付路由功能需求文档
DMHS单机实时同步（DM7）
weixin_43459159的博客
09-24 521
DMHS单机实时同步（DM7） 前言 DMHS 支持的操作系统平台：Windows 系列（包括 XP、Win2003、Win7/8/10、WinServer2008等），Linux（Redhat、Ubuntu、CentOS、Kylin、Rocky 等）、Aix、Solaris 等。内存要求：DMHS 需要的内存总量取决于执行的分析线程以及执行线程的并发数，最少需要 1G 内存。磁盘需求：DMHS 安装文件占用 277M，包括了管理工具以及管理界面占用的空间，另外需要一些额外的空间存储 DMHS 运行的日志文
LInux服务——firewall
ZJJ_5346的博客
12-05 506
之前的好多篇博客都讲了关于Linux中的各种服务，这次继续说说比较重要的，为我们的电脑保驾护航的服务：防火墙。 关于Linux的防火墙，首先要知道Linux的防火墙分为好多种，但都是建立在对内核的控制上的。 RHEL中有几种防火墙共存 iptablesfirewalldip6tablesebtables 这些软件本身其实并不具备防火墙功能，他们的作用都是在用户空间中管理和维护规则，
DMHS搭建
m0_63245056的博客
12-15 175
搭建前的准备工作 两台机器ip分别为192.168.116.51和192.168.116.52。52为源端，51为目的端。 在源端、目的端分别安装达梦8，dm8安装路径/home/dmdba/dmdbms，实例路径/dmdata/DAMENG，端口都为5236。 源端准备工作 由于 DMHS 配置文件涉及多个配置项，在安装配置 DMHS 之前，需要做好相关准备工作，具体有如下准备工作： （1）检查操作系统及数据库版本以及位数，确保与待部署的 DMHS 版本相匹配。 （2）规划好源端 DMHS 可使用..
配置DMHS同步工具(dm8-Oracle12c)
qq_44236935的博客
07-13 566
配置dmhs同步(dm8-Oracle12c)
(11)达梦DMHS技术原理及应用介绍
idmon的博客
07-05 2031
在上一篇博客里，我们对达梦数据库MPP大规模并行处理集群进行了动手部署实践。本篇技术分享文章是对达梦DMHS技术原理的学习。数据实时同步软件(DMHS)简介达梦数据实时同步软件(DMHS)是支持异构环境的高性能、高可靠、高可扩展数据库实时同步复制系统。...
DMHS 配置详解
liuyanwei1024的博客
02-14 1868
DMHS简介 达梦数据实时同步软件 DMHS， 通过秒级数据实时同步可以有效避免传统备份系统导致的无法完全满足企业对于信息系统不中断服务的问题； 通过变化日志捕捉可以有效降低传统 ETL 工具因创建触发器、 影子表等对业务系统带来的性能影响； 通过可读写的备机数据库系统可以解决传统备机系统仅作为后备而无法对外提供数据服务的问题。 达梦DMHS 共分为四个大模块： 1、调度管理模块：负责同步服务的启动框架， 根据配置文件加载并启动 CPT、 EXEC 或NET 模块。 2、日志捕获模块：负责通过解析源端数据库
达梦DMHS安装与配置（Oracle到DM8）
dcps75321的博客
01-06 1687
DMHS介绍 DMHS主要有3个模块 CPT，日志分析，捕获并装载源端数据库的redo日志，会连接源端数据库。 NET，消息发送，将CPT捕获的内容发往EXEC。 EXEC，数据入库，将收到的内容进行执行，会连接目的端数据库。 另有一个模块用于管理上方这3个模块——MGR，它可以启动并加载这3个模块，类似个中控台。 NET模块一般在网络有物理隔离，或需要跨网段传输时使用，我们常用它的子模块，后续说明。 DMHS可以装在源端或目的端机器上，也可以单独装在其他机器上，根据情况而定。 有
Oracle11g到DM8的单向实时同步
weixin_48923117的博客
05-18 327
搭建Oracle11g到DM8的DMHS数据实时同步
socket 实现路由功能
最新发布
05-20
Socket 是一种网络编程的工具，可以用于实现路由功能。在路由器中，需要使用 Socket 来监听网络流量，将流量转发到正确的目的地。 以下是使用 Socket 实现路由功能的一般步骤： 1. 创建一个 Socket 对象，绑定到一...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值