DMHS部署（DM到DM详细版）

已于 2023-08-17 15:06:49 修改
阅读量1.5k 收藏 4
点赞数 4
分类专栏： DM数据库基础专栏 文章标签： linux 服务器 运维
于 2022-08-23 13:14:04 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/keith_lh/article/details/126482302
版权

DMHS部署（DM到DM详细版）

一、DMHS的安装

1.1主机规划

节点主机
源端单节点1192.168.11.130
目的端节点2（灾备库）192.168.11.131

1.2关闭防火墙

查看防火墙状态，如果显示为active，需要关闭防火墙，禁用则开机不启动防火墙。

systemctl status firewalld.service  #查看防火墙状态
systemctl stop firewalld.service  #临时关闭防火墙
systemctl disable firewalld.service  #开机不自启防火墙

关闭SELinux，查看是否开启了SELinux，如果显示为Enforcing，需要改为Disabled，再重启系统使配置生效。

getenforce
vi /etc/selinux/config
进入文件后修改 SELINUX = disabled
保存退出文件
reboot

1.3DMHS的安装

以下内容在两个节点都需要执行，上传DMHS的安装包到Linux，使用dmdba用户进行安装
安装包：dmhs_V4.1.48_pack4_dm8_rev104804_rh6_64_veri_20211228.bin

安装包百度网盘链接：https://pan.baidu.com/s/1i8FpobP1AqV81-we9aYlag?pwd=2afi
提取码：2afi

修改可执行文件权限后执行安装程序

chmod +x dmhs_V4.1.48_pack4_dm8_rev104804_rh6_64_veri_20211228.bin

./dmhs_V4.1.48_pack4_dm8_rev104804_rh6_64_veri_20211228.bin

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
至此DMHS安装完成，环境安装路径为/home/dmdba/dmhs

1.4 安装ODBC（两台虚拟机）

使用root用户执行以下安装命令

yum -y install unixODBC

odbcinst -j  #查看配置文件路径

在这里插入图片描述
修改这两个配置文件，添加下列内容：

vim /etc/odbcinst.ini

[DM8 ODBC DRIVER]
Description = ODBC DRIVER FOR DM8
Driver = /home/dmdba/dm8/bin/libdodbc.so

在这里插入图片描述

vim /etc/odbc.ini

添加如下内容：

[DM8]
Description = DM ODBC DSN
Driver = DM8 ODBC DRIVER
SERVER = localhost
UID = SYSDBA
PWD = SYSDBA
TCP_PORT = 5236

测试连接
使用 dmdba 用户执行 isql 测试连接是否正常：

isql dm8 -v

在这里插入图片描述

二、数据库准备工作

2.1新建归档

使用SYSDBA连接登录数据库执行以下语句开启归档日志。其中DEST为归档日志存放目录，需要提前创建好，FILE_SIZE为单个归档文件大小，SPACE_LIMIT为归档目录日志目录大小限制.

./disql SYSDBA/SYSDBA:5236  #进数据库
ALTER DATABASE MOUNT;
ALTER DATABASE ADD ARCHIVELOG 'DEST=/home/dmdba/dmarch/DMHS,TYPE=LOCAL,SPACE_LIMIT=0';
ALTER DATABASE ARCHIVELOG;
ALTER DATABASE OPEN;
select para_value from v$dm_ini where para_name in ('ARCH_INI');

在这里插入图片描述

2.2开启逻辑日志

使用SYSDBA用户连接登录数据库执行以下语句：

SP_SET_PARA_VALUE(1,'RLOG_APPEND_LOGIC',1);
select para_value from v$dm_ini where para_name in ('RLOG_APPEND_LOGIC');

在这里插入图片描述

2.3配置DDL辅助表和触发器

使用SYSDBA连接登录数据库执行DMHS安装目录下script子目录的“ddl_sql_dm8.sql”脚本。（可以使用disql连接，使用"start /xx/xx.sql"直接执行该脚本，但建议使用DM管理工具连接的数据库，直接复制SQL脚本内容到查询框执行）

在这里插入图片描述
执行完成后，使用以下SQL语句查询辅助表是否创建成功

select owner, table_name from dba_tables where owner = 'SYSDBA' and table_name like 'DMHS%' and status = 'VALID';

执行以下SQL语句查询触发器是否创建成功：

select owner, trigger_name from dba_triggers where owner = 'SYSDBA' and trigger_name like 'DMHS%' and status = 'Y';

查询结果如下图，共9个辅助表，4个触发器。

在这里插入图片描述

三、配置源端和目的端

3.1目的端

在DMHS安装目录下的bin子目录，新建dmhs.hs配置文件

cd /home/dmdba/hsdm/bin
vim dmhs.hs

<?xml version="1.0" encoding="GB2312"?>
<dmhs>

 <base>    <!-- 管理模块的基本配置 -->
    <lang>en</lang>    <!-- 语言选项,ch 为中文,en 为英文 -->
    <mgr_port>5345</mgr_port>    <!-- 管理端口号，默认为5345-->
    <ckpt_interval>60</ckpt_interval>    <!-- 检查点间隔，默认60 -->
    <siteid>2</siteid>    <!-- 站点ID，这个ID配置时要注意，全局唯一，最小值0，最大值65535 -->
    <version>2.0</version>
</base>

<exec>    <!-- 执行模块的基本配置 -->
  <recv>
    <data_port>5346</data_port>    <!-- 当数据传递采用网络直连时，需要配置该参数，表明同步数据从该端口号获取。 -->
  </recv>
  <db_type>dm8</db_type>    <!-- 目标端数据库类型 -->
  <db_server>192.168.11.131</db_server>    <!-- 目标端数据库服务名或IP -->
  <db_user>SYSDBA</db_user>    <!-- 目标端数据库用户 -->
  <db_pwd>SYSDBA</db_pwd>    <!-- 用户的密码 -->
  <db_port>5236</db_port>    <!-- 目标端数据库端口 -->
  <db_name></db_name>    <!-- 默认数据库名，默认为空串(只针对dm6有用)-->
  <char_code>PG_GB18030</char_code>
  <exec_thr>4</exec_thr>    <!-- 执行线程个数，只有当 exec_mode 为 1 时才会生效!默认为1 -->
  <exec_sql>1024</exec_sql>    <!-- SQL 缓存大小，默认为 512M -->
  <exec_trx> 5000 </exec_trx>    <!-- 事务缓存个数，默认为 5000 -->
  <exec_rows>1000</exec_rows>    <!-- 批量绑定行数，默认为 250 -->
 </exec>
</dmhs>

启动目的端

./dmhs_server dmhs.hs
start exec

在这里插入图片描述

3.2源端

在DMHS安装目录下的bin子目录，新建dmhs.hs配置文件

cd /home/dmdba/dmhs/bin
vim dmhs.hs

 <?xml version="1.0" encoding="GB2312"?>
<dmhs>

 <base>
<lang>en</lang>
 <mgr_port>5345</mgr_port>
 <ckpt_interval>60</ckpt_interval>
 <siteid>1</siteid>
<version>2.0</version>
 </base>

 <cpt>
 <db_type>dm8</db_type>
 <db_server>127.0.0.1</db_server>
 <db_user>SYSDBA</db_user>
 <db_pwd>SYSDBA</db_pwd>
 <db_port>5236</db_port>
 <db_ssl_path></db_ssl_path>
 <db_ssl_pwd></db_ssl_pwd>
 <parse_thr>1</parse_thr>
 <ddl_mask>op:obj</ddl_mask> <!--DDL 配置项-->
 <arch><!--归档清理配置项-->
 <clear_interval>600</clear_interval>
 <clear_flag>0</clear_flag>
 </arch>
 <send><!-- 发送模块配置 -->
 <ip>192.168.11.131</ip>
 <mgr_port>5345</mgr_port>
 <data_port>5346</data_port>
 <trigger>1</trigger><!-- 是否忽略触发器，默认为 0，限定值 0,1 -->
 <constraint>1</constraint><!-- 是否忽略约束，默认为 0，限定值 0,1 -->
 <identity>1</identity>
 <net_turns>0</net_turns>
 <filter><!--过滤配置项-->
 <enable><!-- 白名单，所有允许同步的表 -->
<item>SYSDBA.*</item>
 </enable>
 </filter>

 <map><!--映射配置项-->
 <item>SYSDBA.*==SYSDBA.*</item>
 </map>

 </send>
 </cpt>
</dmhs>

启动源端之前建测试表

create table a(
id int,
name varchar(255)
);

insert into a values(1,'john');

启动源端（bin目录下）：

./dmhs_server dmhs.hs 
clear exec lsn #为了初始化日志的起始位置。
COPY 0 “ SCH.NAME=’SYSDBA’ ” CREATE|INSERT|DICT #装载数据，配置同步掩码--一次就行
start cpt

在这里插入图片描述
显示如上界面表示启动成功

去目的端检查数据是否从源端同步到了目的端：
在这里插入图片描述
DM到DM的DMHS部署完成！

四、问题

4.1源端缺少依赖文件

在这里插入图片描述
将以下libdmoci.so文件copy到dmhs/bin目录下
在这里插入图片描述

4.2源端可以同步数据，但是启动有如下警告

在这里插入图片描述
应该是DMHS安装包太旧了，换个新的release.rar替代dmhs下的bin目录

上传后解压文件

rar x release.rar

对于.rar要在linux下处理.rar文件，需要安装RAR for Linux，可以从网上下载

可从http://www.rarsoft.com/download.htm下载RAR 5.50 for Linux

然后安装：

tar -xzvf rarlinux-x64-612.tar.gz
cd rar
make

4.3换了release目录后，启动源端，提示没有key文件

在这里插入图片描述
将dmhs.key文件上传到dmhs的release(我改名了叫bin3)目录下

在这里插入图片描述
如上错误是我防火墙没管好导致的，防火墙被锁定了，可以重开后关闭。就能解决以上问题。

执行命令，即可实现取消firewalld的锁定

systemctl unmask firewalld  #取消锁定

systemctl status firewalld.service  #查看防火墙状态
systemctl stop firewalld.service  #临时关闭防火墙
systemctl disable firewalld.service  #开机不自启防火墙

在我第二次部署同样遇到以上的问题，这一次不是防火墙的问题，而是源端dmhs.hs文件中的发送模块配置的IP配置成了源端的，应该配置目的端的IP。

以上内容如有误，欢迎交流，我会继续完善！

达梦在线服务平台：https://eco.dameng.com/

数据小君
关注
  • 4
    点赞
  • 踩
  • 4
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
（12）DMHS的部署实践
idmon的博客
07-05 565
接着上一篇的理论学习，本文分享我们继续对DMHS的部署实践进行动手操作分享。DMHS全称是Heterogeneous database Synchronization for DM，即达梦异构数据库同步软件。DMHS是基于数据库日志，支持同构、异构数据库的实时同步软件，可以实现双业务中心架构。.........
DMHS-ORACLE RAC 到 DM主备双向同步
05-11
DMHS-ORACLE RAC 到 DM主备双向同步的相关配置文件
Oracle到DM8移植报告
07-26
Oracle到DM8移植报告
达梦DMHS-Manager工具安装部署
最新发布
不定期分享数据库相关内容。
04-02 1929
DMHS管理平台以B/S架构实现，只要网络可达，通过浏览器即可进行远程访问控制，后端服务以DM数据库作为元数据存储，使用Tomcat来运行Web服务，DMHS运维和监控分别是通过Agent和Stat组件来实现。Agent主要负责DMHS服务的部署、启停、删除/添加模块、版本升级、修改配置、Web控制台等一系列服务端操作；Stat要负责DMHS实例的监控数据和硬件资源信息的采集。
dmhs搭建dm到kafka同步.md
05-26
dmhs搭建dm到kafka同步.md
DMHS安装部署
aa0597的博客
08-29 516
1 准备环境 准备两台安装了dm7的机器 1.1归档参数      DMHS同步源端数据库需要开启归档模式，使用如下语句检查DM7归档是否开启： select arch_mode from v$database;      如果ARCH_MODE字段查询结果为“N”，则DM7数据库归档未开启,为y,则表示归档开启 1.2附加日志参数      DMHS同步
达梦DMHS单机双向传输（dm8-dm8）
weixin_38840521的博客
10-11 498
hs
手把手教你达梦数据实时同步软件 (DMHS)的安装和使用（附实战详细记录：本地模拟实现达梦数据库双活、灾备）
weixin_42082084的博客
05-07 8988
系列文章目录 文章目录系列文章目录前言环境一、DMHS的安装 （命令行）1、安装文件准备2、修改可执行文件后执行安装程序二、DM8数据库准备工作1、开启归档日志2、开启逻辑日志3、配置 DDL辅助表和触发器4、创建DMHS软件连接数据库的用户三、DMHS双向同步配置节点1 DMHS服务配置节点2 DMHS服务配置一个简单地使用例子四、关闭达梦ETL服务总结 前言 本次模拟实验主要在本地两台虚拟机上，安装dm8数据库，并通过DMHS软件实现双向同步，达到双活、灾备效果。（以下主要展开DMHS的安装和配置，
搭建达梦数据库实时同步软件DMHS
我是数据库小垃圾
07-14 1983
本文先简单介绍达梦数据库实时同步软件DMHS，然后描述了DMHS的搭建方法，实现DM8 到 DM8 数据库的实时同步。
DMHS介绍
m0_49048788的博客
02-11 1681
1. DMHS模块 （1）日志分析（CPT）： 负责对源数据库进行解析，联合字典信息，提取其中数据的变化：比如DML操作，DDL操作，对这些操作进行包装后，投递给消息发送（NET）模块。 （2）数据传输（NET）-CPT和EXEC之间的传输媒介： NET消息发送子模块：分发CPT捕获到的日志操作，分发前可对操作进行过滤、对表进行过滤和映射。经过处理的消息通过网络（TCP/IP）发送给下一级，或者保存到本地文件。 NET消息接收子模块：接收NET发送子模块通过网络传输的消息，完成接收之...
DM数据同步工具DMHS、DM和oracle端安装
weixin_44219201的博客
09-07 1125
DMHS概述及在DM和Oracle安装
dm7_20210122_x86_rh6_64_ent_7.6.1.88_dmdci.zip
11-18
RH6操作系统DM7 dmoci.so/dmodbc.so动态链接库文件
ThinkSystem DM7100H硬件安装和维护指南
06-25
ThinkSystem DM7100H硬件安装和维护指南 设备安装维护指南，包含了：1.DM7100H 设备简介 2.设备组件说明 3.系统安装和设置方法 4.硬件更换过程，包含整套存储 5.运行诊断命令。 针对运维和部署时该文档非常有用，...
ThinkSystem DM7100F 系统 安装和设置说明
06-25
ThinkSystem DM7100F 系统 安装和设置说明 针对DM7100F 设备初次上架使用，包含设备介绍，如何安装导轨，如何上架，如何链接线缆，线缆介绍，若是在上架阶段可下载获取相关信息；
【与达梦同行】那些DMHS使用二三事
yuDazzle的博客
12-07 976
那些dmhs使用二三事
DMHS同步原理介绍以及DM8同步到DM8
zuixinnet的专栏
06-15 2228
DMHS 在进行增量数据同步之前，需完成同步表的字典装载和表数据的初始装载。DMHS 目标端通过 NET 模块接收源端发送过来的日志消息，然后把这些消息按事务分类，如果某个事务上收到了提交消息，则通过 SQL 逆向生成的技术构造还原相应的事务 SQL语句，使用 ODBC 驱动接口对这些数据进行入库执行，完成数据同步；在源端，DMHS 的 CPT 模块采用优化的日志扫描算法实现增量日志数据的快速捕获分析，并将分析完成后的日志数据转换为内部的消息格式，然后通过网络将消息发送至目标端DMHS 服务；
达梦数据库：mysql -dm数据同步dmhs工具搭建
qq_41592403的博客
08-13 1866
注意 Dmhs对mysql的 支持：表的ddl 操作，注释，索引，数据同步，支持装载和增量同步； 对于其它对象如触发器，函数，存储过程，不能装载和使用增量同步。建议表结构迁移使用达梦迁移工具（dts ）进行创建。 数据库版本 达梦 V8 ，mysql 8.0.15 源端操作 1设置 MYSQL 本地链接库路径 DMHS 在运行时，需要加载本地 MYSQL 动态库，linux/unix 平台下为 libmysqlclient.so。 在部署 DMHS 之前，需将 libmysqlclient.so 所在目录添
DMHS搭建之实时主备到DM8
qq_44619675的博客
09-15 962
DMHS详细的搭建过程
达梦数据实时同步软件（DMHS）浅理解
SAMLe_的博客
08-10 204
DMHS 基于成熟的关系数据模型和标准接口，支持多种软硬件平台，能够灵活的配置出一对一、一对多、多对一、多对多以及级联等多种形式的复制拓扑结构。
dmhs-dm7-kafka
08-02
DMHS是指数据同步工具DMHS（Data Migration and Heterogeneous Replication Service），它可以将数据从DM7同步至Kafka。在源端，只需要配置DMHS的参数文件dmhs.hs，并设置相关的同步运行参数。而在Kafka执行端，则需要设置多个配置文件，包括同步参数配置dmhs.hs、Kafka发送参数配置dmhs_kafka.properties，以及自定义的json格式配置文件json_format.ini。启动脚本start_dmhs_kafka.sh用于启动DMHS和Kafka的同步服务，其中需要设置相关的环境变量和路径，并指定配置文件的位置。[1][2][3]

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值