DMDRS搭建

最新推荐文章于 2024-10-17 18:58:27 发布
最新推荐文章于 2024-10-17 18:58:27 发布
阅读量814 收藏 10
点赞数 28
分类专栏： DM数据库 文章标签： 数据库 学习
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_53673794/article/details/142323597
版权

DMDRS搭建

本次进行DMDRS工具的部署搭建以及使用

环境配置

操作系统及数据库配置

  • 操作系统：使用CentOS7
  • 数据库：dm8_20240408_x86_rh7_64

服务器配置

实例名服务器IP
DM1192.168.19.7（源DMDRS）
DM2192.168.19.4（目的DMDRS）

目录配置

目录类型源DMDRS数据库目的DMDRS数据库
安装路径/home/dmdba/dmdrs5/home/dmdba/dmdrs5
执行程序目录/home/dmdba/dmdrs5/bin/home/dmdba/dmdrs5/bin
配置文件路径/home/dmdrs/dmdrs5/bin/cpt.xml/home/dmdrs/dmdrs5/bin/exec.xml
服务脚本目录/home/dmdrs/dmdrs5/bin/home/dmdrs/dmdrs5/bin
console远程控制工具/home/dmdrs/dmdrs5/bin/drcsl/home/dmdrs/dmdrs5/bin/drcsl

数据库准备工作

开启源数据库的归档和逻辑日志（源端）

  • 动态配置（推荐）

    • 使用disql登录数据库，执行命令进行归档配置

      SQL> alter database mount;
SQL> alter database add archivelog 'DEST=/home/dmdba/arch,TYPE=LOCAL,FILE_SIZE=512,SPACE_LIMIT=10240';
SQL> alter database archivelog;
SQL> alter database open;

      在这里插入图片描述

    • 调用系统过程SP_SET_PARA_VALUE修改RLOG_APPEND_LOGIC参数值

      SQL> call sp_set_para_value(1,'RLOG_APPEND_LOGIC',1);

      在这里插入图片描述

  • 静默配置

    • 进入DM数据库的配置文件dm.ini中修改ARCH_INI参数为1，RLOG_APPEND_LOGIC根据情况配置

      #configuration file
ARCH_INI = 1
  
#redo log
RLOG_APPEND_LOGIC = 1

    • 在dm.ini同目录下，新建配置文件dmarch.ini，并添加归档配置文件

      [ARCHIVE_LOCAL1]
	ARCH_TYPE = LOCAL
	ARCH_DEST = /home/dmdba/arch
	ARCH_FILE_SIZE = 512
	ARCH_SPACE_LIMIT = 10240

    • 配置完毕后重启服务器

配置DDL同步（源端）

  • 辅助表方式（推荐）

    • 在源数据库执行ddl_sql_dm8.sql脚本创建辅助表，脚本默认在DMDRS执行程序目录下的scripts目录中

      SQL>set define off;
SQL>start /home/dmdba/dmdrs5/bin/scripts/ddl_sql_dm8.sql

      ​ 建议：

      ​ 这里建议使用manager工具执行脚本，使用disql执行的话很容易出现部分语句报错

      在这里插入图片描述

    • 检查创建的触发器和辅助表是否有效

      SQL> select owner, trigger_name from dba_triggers where owner = 'SYSDBA' and trigger_name like 'DRS_$%' and status = 'Y';

SQL> select owner, table_name from dba_tables where owner = 'SYSDBA' and table_name like 'DRS_$%' and status = 'VALID';

      在这里插入图片描述

      • 出现4个触发器、9个辅助表则表示配置成功

  • 系统表方法

    • 静默配置

      • 设置数据库配置文件dm.ini中RLOG_APPEND_LOGIC参数值为1

        #redo log
RLOG_APPEND_SYSTAB_LOGIC = 1

      • 重启数据库服务，使配置生效

    • 动态配置

      • 调用系统过程SP_SET_PARA_VALUE修改RLOG_APPEND_SYSTAB_LOGIC参数值

        SQL> call sp_set_para_value(1,'RLOG_APPEND_SYSTAB_LOGIC',1);

创建数据库同步用户DMDRS（源端&目的端）

  • 在源端和目的端创建数据库同步用户DMDRS，并赋予同步权限

    注：

    ​ 如果是在测试环境下学习，可以直接赋予DBA权限；如果是在生产环境下，需要执行权限管控，配置同步用户最小权限

    • 这里我使用manager工具创建用户

      在这里插入图片描述

DMDRS准备工作

DMDRS服务管理规划（源端&目的端）

  • DMDRS服务运行过程中，需要使用数据库的驱动文件访问数据库数据，需要为运行DMDRS的用户设置环境变量

    • 在系统中查询驱动文件的所在位置

      find /home/dmdba/dmdbms -name *dmdpi*

      在这里插入图片描述

    • 设置环境变量，添加驱动文件路径

      export LD_LIBRARY_PATH="$LD_LIBRARY_PATH:/home/dmdba/dmdbms/drivers/dpi"
echo $LD_LIBRARY_PATH

      在这里插入图片描述

DMDRS配置

配置源DMDRS

  • 源DMDRS服务包括Manager管理模块和CPT模块，在dmdrs安装目录下的bin/conf_sample下存有配置文件模板

    <?xml version="1.0" encoding="GB18030"?>
<drs>
    <base>
        <mgr_port>5345</mgr_port><!--如：5345-->
        <siteid>1</siteid><!--如：1-->
    </base>
    <cpt>
        <name>cpt_dm8</name><!--如：cpt_dm8-->
        <login>
            <dbtype>dm8</dbtype><!--如：dm8-->
            <server>192.168.19.142</server><!--如：192.168.20.24-->
            <user>DMDRS</user><!--如：DMDRS-->
            <pwd>DMDRS</pwd><!--如：DMDRS-->
            <port>5236</port><!--如：5236-->
        </login>
        <send>
            <ip>192.168.19.139</ip><!--如：192.168.20.21-->
            <port>5345</port><!--如：5345-->
            <target_name>exec_dm8</target_name><!--如：exec_dm8-->
            <map>
                <item>*.*==*.*</item><!--如：*.*==*.*-->
            </map>
        </send>
    </cpt>
</drs>

    在这里插入图片描述

配置目标DMDRS

  • 目标DMDRS服务包括Manager管理模块和EXEC模块

    <?xml version="1.0" encoding="GB18030"?>
<drs>
    <base>
        <mgr_port>5345</mgr_port><!--如：5345-->
        <siteid>2</siteid><!--如：2-->
    </base>
    <exec>
        <name>exec_dm8</name><!--如：exec_dm8-->
        <login>
            <dbtype>dm8</dbtype><!--如：dm8-->
            <server>192.168.19.139</server><!--如：192.168.20.21-->
            <user>DMDRS</user><!--如：DMDRS-->
            <pwd>DMDRS</pwd><!--如：DMDRS-->
            <port>5236</port><!--如：5236-->
        </login>
    </exec>
</drs>

    在这里插入图片描述

DMDRS运行

管理服务（源端&目的端）

  • 配置DMDRS服务脚本

    • 将服务脚本模板TemplateService拷贝到执行程序目录，并修改服务脚本的名称为默认服务脚本名

      cp /home/dmdba/dmdrs5/bin/service_template/TemplateService /home/dmdba/dmdrs5/bin/DrsService

    • 打开并修改服务脚本中的相关配置参数

      ##源端DMDRS配置
INSTALL_HOME=/home/dmdba/dmdrs5
PROG_DIR=/home/dmdba/dmdrs5/bin
CONF_PATH=/home/dmdba/dmdrs5/bin/cpt.xml
EXEC_PROG_NAME=drsvr
SERVICE_TYPE_NAME="drs server"

##目的端DMDRS配置
INSTALL_HOME=/home/dmdba/dmdrs5
PROG_DIR=/home/dmdba/dmdrs5/bin
CONF_PATH=/home/dmdba/dmdrs5/bin/exec.xml
EXEC_PROG_NAME=drsvr
SERVICE_TYPE_NAME="drs server"

      在这里插入图片描述

启动DMDRS服务

  • 启动源DMDRS服务器

    ./DrsService start

    在这里插入图片描述

  • 启动目的端服务器

    ./DrsService start

    在这里插入图片描述

数据复制

数据迁移

  • 在源端DMDRS服务中执行数据迁移命令

    说明：

    ​ 数据迁移功能无需启动CPT功能模块，直接执行相应的数据迁移命令即可

    • 启动控制台

      ./drcsl cpt.xml

    • 连接源DMDRS服务

      CSL> connect

    • 将源数据库DMDRS模式下表EMPLOYEE的全量数据迁移到目标数据库

      CSL> alter cpt_dm8 cp "sch.name='DMDRS' and tab.name='EMPLOYEE'"

      在这里插入图片描述

  • 验证迁移结果

    • 到目的端数据库上去查看是否存在表EMPLOYEE，表中是否存在数据，数据是否能够对得上

      ##查看表EMPLOYEE中的所有数据
select * from DMDRS.EMPLOYEE;

##查看EMPLOYEE表中的数据量
select count(*) from DMDRS.EMPLOYEE;

      在这里插入图片描述

      • 35个数据完完整整地迁移过来了

数据同步

  • 配置目标DMDRS服务

    • 在目标DMDRS服务中打开exec.xml配置文件，修改配置文件内容

      <?xml version="1.0" encoding="GB18030"?>
<drs>
    <base>
        <mgr_port>5345</mgr_port>
        <siteid>2</siteid>
    </base>
    <exec>
        <name>exec_dm8</name>
        <login>
            <dbtype>dm8</dbtype>
            <server>192.168.19.4</server>
            <user>DMDRS</user>
            <pwd>DMDRS</pwd>
            <port>5236</port>    
        </login>
        <group>
            <item>
                <id>35</id>
                <exec_policy>0</exec_policy>                    
                <desc>
                    <table>*.*</table>
                </desc>
            </item>
        </group>
    </exec>
</drs>

      在这里插入图片描述

  • 配置源端DMDRS服务器

    • 在源端DMDRS服务中打开cpt.xml配置文件，修改配置文件内容

      <?xml version="1.0" encoding="GB18030"?>
<drs>
    <base>
        <mgr_port>5345</mgr_port>     
        <siteid>1</siteid>
    </base>
    <cpt>
        <name>cpt_dm8</name>
        <login>
            <dbtype>dm8</dbtype>
            <server>192.168.19.7</server>
            <user>DMDRS</user>
            <pwd>DMDRS</pwd>
            <port>5236</port>
        </login>
        <send>
            <ip>192.168.19.4</ip>
            <port>5345</port>
            <target_name>exec_dm8</target_name>
            <map>
                <item>*.*==*.*</item>
            </map>
        </send>
    </cpt>
</drs>
  • 运行DMDRS服务器

    • 启动目标DMDRS服务器

      ./DrsService start

    • 启动源DMDRS服务器

      ./DrsService start
  • 启动源端CPT模块

    • 启动控制台，连接服务

      ##启动控制台
./drcsl cpt.xml

##连接DMDRS服务
CSL> connect

    • 设置数据库当前最新的日志LSN作为日志解析的起始位置

      CSL> alter cpt_dm8 set lsn

    • 启动CPT模块，将源数据库中DMDRS模式下所有的表添加同步，并在同步之前把源端表的全量数据装载到目标数据库

      ##启动CPT模块
CSL> start

##添加同步
CSL> alter cpt_dm8 add table "sch.name='DMDRS'"

      在这里插入图片描述

  • 验证同步结果

    • 在源DMDRS服务上创建表test，并插入数据

      ##创建表test
CREATE TABLE DMDRS.test(
	id INTEGER,
	name VARCHAR(20)
);

##插入数据
INSERT INTO DMDRS.TEST VALUES(1,'Tom'),(2,'Jerry');

##提交
commit;

    • 到目的DMDRS服务上查看数据是否同步过来

      在这里插入图片描述

      • 源端DMDRS服务上的表已经同步过来了，同时表中的数据也过来了

至此，DMDRS工具的数据迁移和同步已经验证成功。

总结

  • 本次主要是DMDRS工具的搭建使用，需要注意许可证的时间，我最开始搭建的时候没有注意到这个问题，在配置完后启动服务就报错了。还有要多注意源端DMDRS的LSN序列与目的端DMDRS的LSN是否能够对得上，不然就会报错网络连接失败，数据也会同步不过去。

参考

  • 达梦在线服务平台——https://eco.dameng.com
白柏子
关注
专栏目录
信创迁移适配预研-达梦数据库DM8服务与客户端工具安装使用
Heartsuit的博客
03-19 856
背景 凡事预则立 听说我们的项目将来要部署到国产化平台上，数据库用的是达梦数据库，国产的这些组件也没有用过，就想着在虚拟机安装数据库服务（因为是在 CentOS7 上安装测试，所以图形化客户端无法使用，可以通过在远程/宿主 Windows 主机上选择仅安装客户端使用，eg：DM管理工具，DM数据迁移工具等），先研究下国产数据库的使用，包括基础的 CRUD 操作以及事务支持，方便将来的部署与维护。 由于本系列文章仅用于记录当时项目的国产化迁移过程，不涉及太多的理论内容，基本都是一系列的操作过程，所以行文
达梦数据库（七）DMDRS部署使用
k15260637027的博客
06-25 934
数据同步工具dmdrs使用
DM数据库学习之路(十八）DMHS数据实时同步软件部署及迁移测试
weixin_44460848的博客
02-23 1612
DMDRS实时同步软件部署及迁移测试
DMDRS学习
qq_53673794的博客
09-11 1017
本章主要介绍DMDRS工具，从概念到模块都有讲到
windows版本达梦数据复制软件 DMDRS安装
weixin_45699851的博客
05-13 234
4：选择安装路径，注意权限以及所需空间大小。5：观察支持的数据源类型。
达梦Linux服务脚本分享
lmsshenwu0的博客
08-14 370
在 Linux 系统中，很多程序的进程是以后台运行的方式启动的，进程以后台的方式运行能够保证进程不因终端窗口的关闭而关闭，而且这些进程大多是常驻的，需要长期运行且不中断的，而在达梦 中也有许多这样的服务程序，这些服务程序也需要以后台的方式来启动，达梦也提供了相应的脚本模板，接下来我们看看有哪些服务脚本吧。 达梦一共提供了14个脚本模板，位于安装目录下的bin目录和bin目录下的service_template下 1、DmAPService 达梦的辅助插...
DMRS、DRS、SRS、CRS各自作用区别
weixin_30289831的博客
09-25 4822
SRS:用于估计上行信道频域信息，做频率选择性调度;用于估计上行信道，做下行波束赋形DMRS:用于上行控制和数据信道的相关解调DRS:仅出现于波束赋型模式，用于UE解调CRS:用于下行信道估计，及非beamforming模式下的解调。调度上下行资源,用作切换测量 http://www.mscbsc.com/bbs/viewthread.php?tid=433176&page=1#pid4...
5G NR中的参考信号设计系列（1）——解调参考信号（DMRS）
热门推荐
weixin_45926367的博客
12-18 3万+
参考信号是系统设计的重要组成部分。 下行参考信号的主要作用包括信道状态信息的测量、数据解调、波束训练、时频参数跟踪。 上行参考信号的主要作用包括上下行信道测量、数据解调等。 参考信号的设计包括随机序列生成的设计和物理资源映射的设计。其中随机序列的生成部分可以直接参考标准38.211中各个信道参考信号序列生成部分。本文主要介绍各个参考信号的图样，即参考信号在物理资源上的时频分布。 解调参考信号（...
DMTDD环境的搭建
zcn126的博客
03-19 717
本文内容主要是讲在DMTDD环境下，前端库是两个节点DSC的搭建过程。 环境准备 DMTDD主机及组件分配信息 实例名 IP地址 操作系统 备注 CSS0/CSS1 DSC0/DSC1 192.168.73.22 Redhat7.2 ...
DMHS单机库到单机库数据同步
weixin_39053024的博客
10-09 386
DMHS单向同步 前言 达梦数据实时同步软件 DMHS 是达梦公司推出的新一代支持异构环境的高性能、高可靠和高可扩展的数据库实时同步系统。DMHS 的实时数据同步复制采用并行处理体系，能够实时读取主机源数据库日志，以较低的资源占用实现大批量的数据实时复制。本文以单机库到单机库的DMHS（dm7）安装部署为例进行详细讲解。 一、DMHS软件安装 1、源端和目标端都需安装DMHS软件 1）配置环境变量 vi /etc/profile ```bash export LD_LIBRARY_PATH=/dm7/dm
达梦8 DSC架构
qq_40135088的博客
10-19 384
用来做个人测试记录的 一、基础概念 1、基础概念 （1）DM 共享存储数据库集群的英文全称 DM Data Shared Cluster，简称 DMDSC。 （2）多个数据库实例同时访问、操作同一数据库 （3）数据文件、控制文件在集群系统中只有一份 2、DMDSC 集群 （1）DMDSC 集群由若干数据库实例（Instance）组成，实例间通过网络（MAL 链路）连接 （2）通过DMCSS，集群同步服务的协助，共同操作一个数据库 3、DMCSS 集群 （1）每个集群节点都需要有.
DMHS的功能特点及其与同类工具的区别
knight195的博客
07-25 551
DMHS是达梦异构数据同步软件 一、DMHS的功能特点 1、源端基于数据库日志分析进行增量数据捕获 2、目标端基于标准数据库接口进行增量数据应用（ODBC） 3、以数据库事务为最小复制单位，确保复制数据的完整性和一致性 4、支持主流关系型数据库（DM系列、ORACLE系列、MySQL、PostgreSQL、DB2、SQL SERVER） 5、支持多种软硬件平台、支持多种复制拓扑结构 6、支持断电续传、支持同步数据链路冗余 7、丰富的高级功能支持：文件转换、复杂拓扑、FTP架构、kafka支持
Rdis的应用，示例，四种模式单机模式、主从模式、哨兵模式、集群模式
weixin_66568937的博客
10-16 668
为此， Redis 提供了复制（replication）功能，可以实现当一台数据库中的数据更新后，自动将更新的数据同步到其他数据库上。主从模式在很多系统设计时都会考虑，一个master挂在多个slave节点，当master服务宕机，会选举产生一个新的master节点，从而保证服务的高可用性。从上面很容易就想到一个问题，既然主从复制，意味着master和slave的数据都是一样的，有数据冗余问题。替换原来的故障节点。刚刚提到了，主从模式，当主节点宕机之后，从节点是可以作为主节点顶上来，继续提供服务的。
基于SSM班级事务管理系统的设计
2401_87849773的博客
10-15 389
管理员账户功能包括：系统首页，个人中心，学生管理，班委管理，班会组织管理，健康档案管理，党员发展管理，党员培训管理，学生成绩管理。主要技术：Java,Spring,mybatis,mysql,jquery,html。班委账号功能包括：系统首页，学生管理，学生成绩管理，活动信息管理，班费通知管理。服务器：SpringBoot自带 apache tomcat。JDK版本：Java JDK1.8。数据库可视化工具： navicat。数据库版本： mysql5.7。开发系统：Windows。
如何使用ssm实现宠物论坛设计网站
寒夜
10-12 1000
【代码】ssm宠物论坛设计网站
Java分布式锁
juanmiao的专栏
10-12 698
每种方法都有其优点和适应的场景，数据库通常简单，但可能存在性能问题，redis非常快，但需要第三方库，并且可能引入网诺问题，Zookeeper提供了更复杂的同步原语，但需要额外学习曲线。分布式锁的实现比线程锁和进程锁要复杂得多，因为它需要在网诺中的多个节点之间进行协调，以保证锁的唯一性和一致性。在实现分布式锁时，通常会有一个中心节点（或者称为锁服务），所有需要获取锁的节点都需要向这个中心节点申请。这个中心节点负责协调和管理所有节点的锁请求，确保锁的唯一性和一致性。创建临时节点，执行业务逻辑，释放锁。
MySQL查询优化：提升数据库性能
最新发布
apple_64847327的博客
10-17 715
MySQL查询优化是一个涉及多个层面的复杂过程，需要我们从索引设计、查询语句编写、数据类型选择、服务器配置等多个角度进行综合考虑。通过不断学习和实践，我们可以逐渐掌握这门艺术，从而提升我们的数据库性能，为用户提供更快更好的服务。优化是一个持续的过程，随着数据量的增长和查询模式的变化，我们需要不断地回顾和调整我们的优化策略。
SCAU数据库实验2习题
会写代码的mika的博客
10-13 1068
1. 查询所有计算机系（Comp. Sci.）开出的、3个学分的课程名。SELECTFROMWHERE2. 查询ID为12345的学生所选修的所有课程的课程号与课程名。3. 使用聚集函数查询ID为12345的学生所选修的所获得的总学分4. 统计每位学生选修的总学分数，显示学生姓名和总学分。对没选修课程的学生，总学分对应位置显示0。
mysql锁之乐观锁、悲观锁、表锁、行锁、共享锁、排他锁
qq_68883928的博客
10-14 645
锁是计算机协调多个进程或线程并发访问某一个资源的机制，在数据库中，除传统的计算资源（CPU、RAM、I/O）的争用以外，数据也是一种供许多用户共享的资源。如何保证数据并发访问的一致性、有效性是所在有数据库必须解决的一个问题，锁冲突也是影响数据库并发访问性能的一个重要因素。从这个角度来说，锁对数据库而言显得尤其重要，也更加复杂。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值