DM8读写分离集群部署

最新推荐文章于 2023-11-28 18:36:15 发布
最新推荐文章于 2023-11-28 18:36:15 发布
阅读量203 收藏
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/YLmpm/article/details/116521082
版权

DM数据库 读写分离 集群配置 故障切换 数据守护
关键词由CSDN通过智能技术生成

DM8读写分离集群部署

前言

读写分离集群是基于即时归档或实时归档实现的高性能数据库集群，不但提供数据保护、容灾等数据守护基本功能，还具有读写操作自动分离、负载均衡等特性。读写分离集群最多可以配置 8 个即时备库或 8 个实时备库，提供数据同步、备库故障自动处理、故障恢复自动数据同步等功能，也支持自动故障切换和手动故障切换两种守护模式。
一般情况下，应用系统中查询等只读操作的比例远大于 Insert/Delete/Update 等DML 操作，修改对象定义等 DDL 操作的比例则更低。但是，这些操作往往混杂在一起，在高并发、高压力情况下，会导致数据库性能下降，响应时间变长。借助读写分离集群，将只读操作自动分发到备库执行，可以充分利用备库的硬件资源，降低主库的并发访问压力，进而提升数据库的吞吐量。
读写分离集群不依赖额外的中间件，而是通过数据库接口与数据库之间的密切配合，实现读、写操作自动分离特性。 DM 的 JDBC、 DPI、 DCI、 ODBC、 Provider 等接口都可以用来部署读写分离集群。

IP地址说明：
机器名IP
主库 DW_P192.168.1.131 / 192.168.0.141
备库 DW_S1192.168.1.132 / 192.168.0.142
确认监视器 DW_M192.168.0.73

一、环境准备

配置数据守护 V4.0 之前，必须先通过备份还原方式同步各数据库的数据，确保各数据的数据保持完全一致。 主库可以是新初始化的数据库，也可以是正在生产、使用中的数据库。

1.配置本地归档

  1. 配置 dm.ini，打开 ARCH_INI 参数
ARCH_INI = 1 #打开归档配置
  1. 配置 dmarch.ini
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL #本地归档类型
ARCH_DEST = /dm/data/DAMENG/arch #本地归档文件存放路径
ARCH_FILE_SIZE = 128 #单位 Mb，本地单个归档文件最大值
ARCH_SPACE_LIMIT = 0 #单位 Mb， 0 表示无限制，范围 1024~4294967294M

2.数据准备

  1. 正常关闭数据库
  2. 进行脱机备份
./dmrman CTLSTMT="BACKUP DATABASE '/dm/data/DAMENG/dm.ini' FULL TO BACKUP_FILE1
BACKUPSET '/dm/data/BACKUP_FILE_01'"
  1. 拷贝备份文件到备库所在机器
  2. 执行脱机数据库还原与恢复
./dmrman CTLSTMT="RESTORE DATABASE '/dm/data/DAMENG/dm.ini' FROM BACKUPSET
'/dm/data/BACKUP_FILE_01'"
./dmrman CTLSTMT="RECOVER DATABASE '/dm/data/DAMENG/dm.ini' FROM BACKUPSET
'/dm/data/BACKUP_FILE_01'"
./dmrman CTLSTMT="RECOVER DATABASE '/dm/data/DAMENG/dm.ini' UPDATE DB_MAGIC"

二、配置主库

1.配置 dm.ini

在 DW_P 机器上配置主库的实例名为 GRP1_RWW_01， dm.ini 参数修改如下：

#实例名，建议使用―组名_守护环境_序号‖的命名方式，总长度不能超过 16
INSTANCE_NAME = GRP1_RWW_01
PORT_NUM = 32141 #数据库实例监听端口
DW_INACTIVE_INTERVAL = 60 #接收守护进程消息超时时间
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态/OGUID
ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间
MAL_INI = 1 #打开 MAL 系统
ARCH_INI = 1 #打开归档配置
RLOG_SEND_APPLY_MON = 64 #统计最近 64 次的日志发送信息

2.配置 dmmal.ini

配置 MAL 系统，各主备库的 dmmal.ini 配置必须完全一致， MAL_HOST 使用内部网络 IP， MAL_PORT 与 dm.ini 中 PORT_NUM 使用不同的端口值， MAL_DW_PORT 是各实例对应的守护进程之间，以及守护进程和监视器之间的通信端口，配置如下：

MAL_CHECK_INTERVAL = 5 #MAL 链路检测时间间隔
MAL_CONN_FAIL_INTERVAL = 5 #判定 MAL 链路断开的时间
[MAL_INST1]
MAL_INST_NAME = GRP1_RWW_01 #实例名，和 dm.ini 中的 INSTANCE_NAME 一致
MAL_HOST = 192.168.0.141 #MAL 系统监听 TCP 连接的 IP 地址
MAL_PORT = 61141 #MAL 系统监听 TCP 连接的端口
MAL_INST_HOST = 192.168.1.131 #实例的对外服务 IP 地址
MAL_INST_PORT = 32141 #实例的对外服务端口，和 dm.ini 中的 PORT_NUM 一致
MAL_DW_PORT = 52141 #实例本地的守护进程监听 TCP 连接的端口
MAL_INST_DW_PORT = 33141 #实例监听守护进程 TCP 连接的端口
[MAL_INST2]
MAL_INST_NAME = GRP1_RWW_02
MAL_HOST = 192.168.0.142
MAL_PORT = 61142
MAL_INST_HOST = 192.168.1.132
MAL_INST_PORT = 32142
MAL_DW_PORT = 52142
MAL_INST_DW_PORT = 33142

3.配置 dmarch.ini

修改 dmarch.ini，配置本地归档和实时归档。除了本地归档外，其他归档配置项中的 ARCH_DEST 表示实例是 Primary 模式时，需要同步归档数据的目标实例名。当前实例 GRP1_RWW_01 是主库，需要向 GRP1_RWW_02同步数据，因此实时归档的 ARCH_DEST 配置为 GRP1_RWW_02。

[ARCHIVE_TIMELY1]
ARCH_TYPE = TIMELY #即时归档类型
ARCH_DEST = GRP1_RWW_02 #即时归档目标实例名
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL #本地归档类型
ARCH_DEST = /dm/data/DAMENG/arch #本地归档文件存放路径
ARCH_FILE_SIZE = 128 #单位 Mb，本地单个归档文件最大值
ARCH_SPACE_LIMIT = 0 #单位 Mb， 0 表示无限制，范围 1024~4294967294M

4.配置dmwatcher.ini

修改 dmwatcher.ini 配置守护进程，配置为全局守护类型，使用自动切换模式。

[GRP1]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 453332 #守护系统唯一 OGUID 值
INST_INI = /dm/data/DAMENG/dm.ini #dm.ini 配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /dm/bin/dmserver #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阀值，默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阀值，默认关闭

5.启动主库

以 Mount 方式启动主库

./dmserver /dm/data/DAMENG/dm.ini mount

6.设置OGUID

启动命令行工具 DIsql，登录主库设置 OGUID 值。

SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL>sp_set_oguid(453332);
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

7.修改数据库模式

启动命令行工具 DIsql，登录主库修改数据库为 Primary 模式

SQL>alter database primary;

三、配置备库

1.配置 dm.ini

在 DW_S1 机器上配置备库的实例名为 GRP1_RWW_02， dm.ini 参数修改如下：

#实例名，建议使用―组名_守护环境_序号‖的命名方式，总长度不能超过 16
INSTANCE_NAME = GRP1_RWW_02
PORT_NUM = 32142 #数据库实例监听端口
DW_INACTIVE_INTERVAL = 60 #接收守护进程消息超时时间
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态/OGUID
ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间
MAL_INI = 1 #打开 MAL 系统
ARCH_INI = 1 #打开归档配置
RLOG_SEND_APPLY_MON = 64 #统计最近 64 次的日志重演信息

2.配置 dmmal.ini

配置 MAL 系统，各主备库的 dmmal.ini 配置必须完全一致， MAL_HOST 使用内部网络 IP， MAL_PORT 与 dm.ini 中 PORT_NUM 使用不同的端口值， MAL_DW_PORT 是各实例对应的守护进程之间，以及守护进程和监视器之间的通信端口，配置如下：

MAL_CHECK_INTERVAL = 5 #MAL 链路检测时间间隔
MAL_CONN_FAIL_INTERVAL = 5 #判定 MAL 链路断开的时间
[MAL_INST1]
MAL_INST_NAME = GRP1_RWW_01 #实例名，和 dm.ini 中的 INSTANCE_NAME 一致
MAL_HOST = 192.168.0.141 #MAL 系统监听 TCP 连接的 IP 地址
MAL_PORT = 61141 #MAL 系统监听 TCP 连接的端口
MAL_INST_HOST = 192.168.1.131 #实例的对外服务 IP 地址
MAL_INST_PORT = 32141 #实例的对外服务端口，和 dm.ini 中的 PORT_NUM 一致
MAL_DW_PORT = 52141 #实例本地的守护进程监听 TCP 连接的端口
MAL_INST_DW_PORT = 33141 #实例监听守护进程 TCP 连接的端口
[MAL_INST2]
MAL_INST_NAME = GRP1_RWW_02
MAL_HOST = 192.168.0.142
MAL_PORT = 61142
MAL_INST_HOST = 192.168.1.132
MAL_INST_PORT = 32142
MAL_DW_PORT = 52142
MAL_INST_DW_PORT = 33142

3.配置 dmarch.ini

修改 dmarch.ini，配置本地归档和即时归档。
除了本地归档外，其他归档配置项中的 ARCH_DEST 表示实例是 Primary 模式时，需要同步归档数据的目标实例名。当前实例 GRP1_RWW_02 是备库，守护系统配置完成后，可能在各种故障处理中，GRP1_RWW_02 切换为新的主库，正常情况下， GRP1_RWW_01 会切换为新的备库，需要向GRP1_RWW_01 同步数据，因此实时归档的 ARCH_DEST 配置为 GRP1_WWT_01。

[ARCHIVE_TIMELY1]
ARCH_TYPE = TIMELY #即时归档类型
ARCH_DEST = GRP1_RWW_01 #即时归档目标实例名
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL #本地归档类型
ARCH_DEST = /dm/data/DAMENG/arch #本地归档文件路径
ARCH_FILE_SIZE = 128 #单位 Mb，本地单个归档文件最大值
ARCH_SPACE_LIMIT = 0 #单位 Mb， 0 表示无限制，范围 1024~4294967294M

4.配置dmwatcher.ini

修改 dmwatcher.ini 配置守护进程，配置为全局守护类型，使用自动切换模式。

[GRP1]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 453332 #守护系统唯一 OGUID 值
INST_INI = /dm/data/DAMENG/dm.ini #dm.ini 配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /dm/bin/dmserver #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阀值，默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阀值，默认关闭

5.启动备库

以 Mount 方式启动备库

./dmserver /dm/data/DAMENG/dm.ini mount

6.设置OGUID

启动命令行工具 DIsql，登录主库设置 OGUID 值。

SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL>sp_set_oguid(453332);
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

7.修改数据库模式

启动命令行工具 DIsql，登录主库修改数据库为 Standby 模式

SQL>alter database standby;

四、配置监视器

由于主库和即时备库的守护进程配置为自动切换模式，因此这里选择配置确认监视器。和普通监视器相比，确认监视器除了相同的命令支持外，在主库发生故障时，能够自动通知实时备库接管为新的主库，具有自动故障处理的功能。

1.配置dmmonitor.ini

修改 dmmonitor.ini 配置确认监视器，其中 MON_DW_IP 中的 IP 和 PORT 和dmmal.ini 中的 MAL_HOST 和 MAL_DW_PORT 配置项保持一致。

MON_DW_CONFIRM = 1 #确认监视器模式
MON_LOG_PATH = /dm/data/log #监视器日志文件存放路径
MON_LOG_INTERVAL = 60 #每隔 60s 定时记录系统信息到日志文件
MON_LOG_FILE_SIZE = 32 #每个日志文件最大 32M
MON_LOG_SPACE_LIMIT = 0 #不限定日志文件总占用空间
[GRP1]
MON_INST_OGUID = 453332 #组 GRP1 的唯一 OGUID 值
#以下配置为监视器到组 GRP1 的守护进程的连接信息，以―IP:PORT‖的形式配置
#IP 对应 dmmal.ini 中的 MAL_HOST， PORT 对应 dmmal.ini 中的 MAL_DW_PORT
MON_DW_IP = 192.168.0.141:52141
MON_DW_IP = 192.168.0.142:52142

2.启动守护进程

启动各个主备库上的守护进程：

./dmwatcher /dm/data/DAMENG/dmwatcher.ini

守护进程启动后，进入 Startup 状态，此时实例都处于 Mount 状态。守护进程开始广播自身和其监控实例的状态信息，结合自身信息和远程守护进程的广播信息，守护进程将本地实例 Open，并切换为 Open 状态。

3.启动监视器

./dmmonitor /dm/data/dmmonitor.ini

监视器提供一系列命令，支持当前守护系统状态查看以及故障处理，可输入 help 命令，查看各种命令说明使用，结合实际情况选择使用。

总结

至此读写分离数据守护系统搭建完毕，在搭建步骤和各项配置都正确的情况下，在监视器上执行 show 命令，可以监控到所有实例都处于 Open 状态，所有守护进程也都处于 Open 状态，即为正常运行状态。

YLmpm
关注
达梦数据库DM8读写分离集群部署
01-27
达梦数据库DM8读写分离集群部署
mysql到达梦数据库DTS迁移列定义超长问题处理
YLmpm的博客
11-22 1997
Mysql达梦迁移列定义超长
达梦数据库学习分享
hero111shenbo的博客
04-14 1172
达梦主从部署
DM8大规模并行处理MPP集群搭建
juracka的博客
12-11 315
DM8大规模并行处理MPP集群搭建搭建环境和规划数据准备修改配置文件启动数据库，设置OGUID，修改数据库模式启动守护进程和监视器 搭建环境和规划 本次搭建集群使用中标麒麟7.0和达梦8.1； A上的主库备份到B；B上的主库备份到C；C上的主库备份到A； 机器名 IP 数据库 A 192.168.1.2 GRP1_MPP_EP01 192.168
DM MPP集群原理与配置管理
NinjaKilling的博客
09-19 568
DM MPP集群原理与配置管理
达梦数据库三节点读写分离集群部署文档
最新发布
06-06
### 达梦数据库三节点读写分离集群部署详解 #### 一、DMRWC集群概述 达梦数据库读写分离集群（DMRWC）作为DM8的重要特性之一，旨在提高高并发事务处理性能。该集群架构特别适用于读多写少的应用场景，在这类场景下...
DM8数据守护与读写分离集群V4.0
05-07
### DM8 数据守护与读写分离集群 V4.0 知识点详解 #### 一、引言 DM8 数据守护与读写分离集群 V4.0 是一款由达梦数据库公司开发的数据管理解决方案，旨在提供高效、稳定的数据保护及高性能的数据库服务。该版本在...
DM7数据守护与读写分离集群
08-30
### DM7 数据守护与读写分离集群知识点解析 #### 一、系统特性及主要改进 **1.1 主要特性** - **实时主备：** 实现了主库与备库之间的实时同步复制，确保数据的一致性和高可用性。 - **MPP 主备：** 支持大规模...
DM 数据守护与读写分离集群
09-24
【DM 数据守护与读写分离集群】是达梦数据库系统的一种高级部署模式，旨在提供高可用性和可扩展性。该集群方案结合了数据守护（Data Guard）和读写分离（Read-Write Splitting）的技术，确保数据库服务在面对故障时...
DM8 配置读写分离集群
qq_41364256的博客
08-04 156
DM8 配置读写分离集群
达梦主备MPP互备策略已经如何以local模式登陆修改OGUID 值
weixin_43029005的博客
03-31 474
1：规划 机器名 IP地址 初始状态 MPP01 192.168.139.100 主库EP_01，备库EP_02 MPP02 192.168.139.101 主库EP_11，备库EP_12 监视器 192.168.139.101 监视器
达梦DM8数据库DSC集群部署（超详细）
liuyanwei1024的博客
12-23 6965
超详细的达梦DSC集群,共享存储集群 部署手册
达梦DM8登录报错：登录密码过期
weixin_52814866的博客
11-28 2641
登录报错：登录密码过期
达梦数据库常见的安全检查项目
m0_58466865的博客
11-06 2379
保护数据，以防不合法的使用所造成的数据泄露、更改或破坏，数据库安全性极为重要，本文讲述了达梦数据库安全检查时几个比较常见检查项目。
达梦8主备集群搭建
weixin_48039295的博客
07-22 912
达梦DM8主备集群环境搭建
达梦8数据守护动态增加实时备库
qq_31055901的博客
02-23 564
新备机器安装数据库软件并初始化实例，数据库名称DAMENG，实例名GRP1_RT_03，这边省略实例的初始化步骤。##手工修改备库，主库所有实例OPEN，必须先修改备库，然后再修改主库。依次启动主库守护进程，备库守护进程，新备库守护进程，最后启动监视器。#手工修改主备库状态为mount状态，必须先修改主库，在修改备库。已用时间: 12.340(毫秒). 执行号:1209.已用时间: 6.039(毫秒). 执行号:0.已用时间: 6.039(毫秒). 执行号:0.步骤11：主库、备库依次动态增加归档配置。
达梦数据库审计
yudukbinxyz的博客
09-05 1996
，如果某个会 话依次执行了这些 SQL 语句，就会触发审计，是语句级与对象级的结合。系统级 系统的启动与关闭，此级别的审计无法也无需由用户进行设置，只要审计开 关打开就会自动生成对应审计记录 ，类似oracle的dba审计。7.4 实时侵害检测系统用于实时分析当前用户的操作，则判断该用户的行为是否是侵害行为，确定侵害等级，并根据侵害 等级采取相应的响应措施。通过考察、跟踪 审计信息，数据库审计员可以查看用户访问的形式以及曾试图对该系统进行的操作，从而采 取积极、有效的应对措施。
达梦数据库工具使用
刘的博客
11-30 4158
达梦7数据库工具的使用 1. 逻辑备份 单表多表备份 按用户备份 备份时是否备份约束、索引、触发器 备份一张表或多张表中部分数据 备份结构 表间并行、表内并行，备份压缩 忽略指定对象、包含指定对象 其他相关参数 逻辑导出（ dexp）和逻辑导入（ dimp）是 DM 数据库的两个命令行工具，分别用来实现对 DM 数据库的逻辑备份和逻辑还原。逻辑备份和逻辑还原都是在联机方式下完成，联机方式是指数据库服务器正常运行过程中进行的备份和还原。 dexp dimp 工具需要从命令行启动..
达梦数据库DM8读写分离集群安装部署
键盘上的艺术
08-30 1358
1 系统（软硬件）环境 1.1硬件环境 服务器具体配置信息 名称 CPU 内存 硬盘SSD 硬盘SAS 网卡 长城擎天CF520 FT-1500A 64GB 2个240GB 标配4个900GB 2块千兆网卡； 1块HBA光纤通道卡：双端口16G...
DM8读写分离安装部署实战指南
"本文档详细介绍了在DM8数据库环境下实现读写分离的安装部署过程，由张仁华在2022-06-24创建的V1.0版本。文档涵盖了演示环境的配置、操作系统的准备工作以及DM8数据库在各节点上的安装步骤。" 在DM8数据库实现读写...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值