DM 7 读写分离搭建过程

最新推荐文章于 2022-10-18 15:47:11 发布
最新推荐文章于 2022-10-18 15:47:11 发布
阅读量104 收藏
点赞数
文章标签： 数据库 java postgresql
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_44341533/article/details/120850526
版权

一、主备介绍

读写分离集群是基于即时归档实现的高性能数据库集群，不但提供数据保护、容灾等数据守护基本功能，还具有读写操作自动分离、负载均衡等特性。读写分离集群最多可以配置8个即时备库，提供数据同步、备库故障自动处理、故障恢复自动数据同步等功能，也支持自动故障切换和手动故障切换两种守护模式。
一般情况下，应用系统中查询等只读操作的比例远大于Insert/Delete/Update等DML操作，修改对象定义等DDL操作的比例则更低。但是，这些操作往往混杂在一起，在高并发、高压力情况下，会导致数据库性能下降，响应时间变长。借助读写分离集群，将只读操作自动分发到备库执行，可以充分利用备库的硬件资源，降低主库的并发访问压力，进而提升数据库的吞吐量。
读写分离集群不依赖额外的中间件，而是通过数据库接口与数据库之间的密切配合，实现读、写操作自动分离特性。DM的JDBC、DPI、DCI、ODBC、Provider等接口都可以用来部署读写分离集群。
根据是否满足读提交事务隔离级特性，读写分离集群可以配置为事务一致模式和高性能两种模式。简单的说，事务一致模式下，不论一个Select语句是在备库执行、还是在主库执行，其查询结果集都是一样的。高性能模式则不能保证查询是一致的，备库的数据与主库的数据同步存在一定的延迟，当Select语句发送到备库执行时，返回的有可能是主库上一个时间点的数据。

二、数据准备

配置读写分离集群之前，必须先同步实例数据，确保两者保持完全一致；主库可以是新初始化的数据，也可以是正在生产、使用中的数据。DM提供了两种方式初始化同步实例数据，数据文件拷贝以及备份还原方式。

不能使用分别初始化库的方法，原因如下：

1． 每个库都有一个永久魔数（permenant_magic），主库传送日志时会判断这个值是否一样，确保来自同一个库，不同的库传送不了日志
2． 由于dminit初始化数据库时，会生成随机密钥用于加密，每次生成的密钥都不相同，备库无法解析采用主库密钥加密的数据

三、读写分离集群搭建

主库搭建步骤

1.单机数据库的搭建请参照“dm7单机数据库的搭建”
2.关闭两端防火墙

Service firewalld stop

3.主库初始化实例

image.png

4.配置相关的配置文件

配置dm.ini

实例名，建议使用“组名_守护环境_序号”的命名方式，总长度不能超过 16
INSTANCE_NAME = GRP1_DM1
PORT_NUM = 5236 #数据库实例监听端口
DW_PORT = 5336 #守护环境下，监听守护进程连接端口
DW_ERROR_TIME = 60 #接收守护进程消息超时时间
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态
ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间
MAL_INI = 1 #打开 MAL 系统
ARCH_INI = 1 #打开归档配置
HA_INST_CHECK_FLAG = 1 #检测是否多个实例进程同时启动
RLOG_SEND_APPLY_MON = 64 #统计最近 64 次的日志发送信息

配置 dmmal.ini

MAL_CHECK_INTERVAL = 5 #MAL 链路检测时间间隔
MAL_CONN_FAIL_INTERVAL = 5 #判定 MAL 链路断开的时间
[MAL_INST1]
MAL_INST_NAME = GRP1_DM1 #实例名，和 dm.ini 中的 INSTANCE_NAME 一致
MAL_HOST = 192.168.13.142 #MAL 系统监听 TCP 连接的 IP 地址
MAL_PORT = 5237 #MAL 系统监听 TCP 连接的端口
MAL_INST_HOST = 192.168.13.142 #实例的对外服务 IP 地址
MAL_INST_PORT = 5236 #实例的对外服务端口，和 dm.ini 中的 PORT_NUM 一致
MAL_DW_PORT = 5239 #实例对应的守护进程监听 TCP 连接的端口
[MAL_INST2]
MAL_INST_NAME = GRP1_DM2
MAL_HOST = 192.168.13.155
MAL_PORT = 5237
MAL_INST_HOST = 192.168.13.155
MAL_INST_PORT = 5236
MAL_DW_PORT = 5239

配置 dmarch.ini

当前实例 GRP1_DM1 是主库，需要向 GRP1_DM2（实时备库）同步数据，因此实时归档的 ARCH_DEST 配置为 GRP1_DM2。
[ARCHIVE_REALTIME]
ARCH_TYPE = REALTIME #实时归档类型
ARCH_DEST = GRP1_DM2 #实时归档目标实例名
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL #本地归档类型
ARCH_DEST = /dm7/data/DAMENG/arch #本地归档文件存放路径
ARCH_FILE_SIZE = 128 #单位 Mb，本地单个归档文件最大值
ARCH_SPACE_LIMIT = 0 #单位 Mb，0 表示无限制，范围 1024~4294967294M

配置 dmwatcher.ini

[GRP1]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 453331 #守护系统唯一 OGUID 值
INST_INI = /dm7/data/DAMENG/dm.ini #dm.ini 配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /dm7/bin/dmserver #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阀值，默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阀值，默认关闭

5.启动数据库确认单实例配置是否成功

./dmserverd start ，查看日志是否有SYSTEM IS READY ，有打印改信息证明数据库配置成功
./dmserverd stop，正常停止单实例

6.配置 dmwatcher.ctl
在配置完成 dmwatcher.ini 后，使用 dmctlcvt 工具生成 dmwatcher.ctl：./dmctlcvt TYPE=3 SRC=/dm7/data/DAMENG/dmwatcher.ini DEST=/dm7/data拷贝生成的 dmwatcher.ctl(生成的是一个目录，文件在目录里面/dm7/data/GRP1/dmwatcher.ctl)文件到数据文件目录/dm7/data/DAMENG。


7.拷贝数据文件文件夹至备机相同路径下

8.Mount启动数据库，配置主库状态

./dmserver /dbdata/dm7/DAMENG/dm.ini mount 


./disql sysdba/SYSDBA
SQL> sp_set_oguid(453331);
DMSQL 过程已成功完成
已用时间: 3.152(毫秒). 执行号:5.
SQL> alter database primary;
操作已执行
已用时间: 3.624(毫秒). 执行号:0

备库搭建步骤

1.解压主库拷贝过来的数据文件至相同路径下，并修改相关配置文件

2.修改配置文件，只需修改dm.ini中的INSTANCE_NAME与dmarch.ini中的ARCH_DEST即可，修改处已标红。

配置dm.ini

#实例名，建议使用“组名_守护环境_序号”的命名方式，总长度不能超过 16
INSTANCE_NAME = GRP1_DM2
PORT_NUM = 5236 #数据库实例监听端口
DW_PORT = 5336 #守护环境下，监听守护进程连接端口
DW_ERROR_TIME = 60 #接收守护进程消息超时时间
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态
ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间
MAL_INI = 1 #打开 MAL 系统
ARCH_INI = 1 #打开归档配置
HA_INST_CHECK_FLAG = 1 #检测是否多个实例进程同时启动
RLOG_SEND_APPLY_MON = 64 #统计最近 64 次的日志发送信息

Dmmal.ini 配置文件为全局唯一，两个节点用同一个文件，无需修改,配置 dmmal.ini

MAL_CHECK_INTERVAL = 5 #MAL 链路检测时间间隔
MAL_CONN_FAIL_INTERVAL = 5 #判定 MAL 链路断开的时间
[MAL_INST1]
MAL_INST_NAME = GRP1_DM1 #实例名，和 dm.ini 中的 INSTANCE_NAME 一致
MAL_HOST = 192.168.13.142 #MAL 系统监听 TCP 连接的 IP 地址
MAL_PORT = 5237 #MAL 系统监听 TCP 连接的端口
MAL_INST_HOST = 192.168.13.142 #实例的对外服务 IP 地址
MAL_INST_PORT = 5236 #实例的对外服务端口，和 dm.ini 中的 PORT_NUM 一致
MAL_DW_PORT = 5239 #实例对应的守护进程监听 TCP 连接的端口
[MAL_INST2]
MAL_INST_NAME = GRP1_DM2
MAL_HOST = 192.168.13.155
MAL_PORT = 5237
MAL_INST_HOST = 192.168.13.155
MAL_INST_PORT = 5236
MAL_DW_PORT = 5239

配置 dmarch.ini

[ARCHIVE_REALTIME]
ARCH_TYPE = REALTIME #实时归档类型
ARCH_DEST = GRP1_DM1 #实时归档目标实例名
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL #本地归档类型
ARCH_DEST = /dm7/data/DAMENG/arch #本地归档文件存放路径
ARCH_FILE_SIZE = 128 #单位 Mb，本地单个归档文件最大值
ARCH_SPACE_LIMIT = 0 #单位 Mb，0 表示无限制，范围 1024~4294967294M

Dmwatcher.ini 配置文件为全局唯一，两个节点用同一个文件，无需修改,配置 dmwatcher.ini

[GRP1]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 453331 #守护系统唯一 OGUID 值
INST_INI = /dm7/data/DAMENG/dm.ini #dm.ini 配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /dm7/bin/dmserver #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阀值，默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阀值，默认关闭

3.Mount 启动数据库，配置备库状态

./dmserver /dbdata/dm7/DAMENG/dm.ini mount

image.png

./disql sysdba/SYSDBA
SQL> sp_set_oguid(453331);
DMSQL 过程已成功完成
已用时间: 7.799(毫秒). 执行号:1.
SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1); 
DMSQL 过程已成功完成
已用时间: 6.622(毫秒). 执行号:2.
SQL> alter database standby; 
操作已执行
已用时间: 3.450(毫秒). 执行号:0.
SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);
DMSQL 过程已成功完成
已用时间: 6.664(毫秒). 执行号:3.

4.监视器配置文件

修改 dmmonitor.ini 配置确认监视器，其中 MON_DW_IP 中的 IP 和 PORT 和dmmal.ini 中的 MAL_HOST 和 MAL_DW_PORT 配置项保持一致。

MON_DW_CONFIRM = 1 #确认监视器模式
MON_LOG_PATH = /dmarch/log #监视器日志文件存放路径
MON_LOG_INTERVAL = 60 #每隔 60s 定时记录系统信息到日志文件
MON_LOG_FILE_SIZE = 32 #每个日志文件最大 32M
MON_LOG_SPACE_LIMIT = 0 #不限定日志文件总占用空间
[GRP1]
MON_INST_OGUID = 453331 #组 GRP1 的唯一 OGUID 值
#以下配置为监视器到组 GRP1 的守护进程的连接信息，以“IP:PORT”的形式配置
#IP 对应 dmmal.ini 中的 MAL_HOST，PORT 对应 dmmal.ini 中的 MAL_DW_PORT
MON_DW_IP = 192.168.0.141:5239
MON_DW_IP = 192.168.0.142:5239

5.两节点启动dmwatcher

./dmwatcherd start

6.启动监视器进程（该进程只起观察作用，对主备运行无影响）

./dmmonitor /dbdata/dmdata/DAMENG/dmmonitor.ini
敲入show并回车，查看集群状态
WSTATUS->OPEN  INST_OK->OK  INSTATUS->OPEN  两节点LSN号（FLSN、CLSN、SSLSN、SLSN）在同一数据级   即为正常状态

四、修改dm_svc.conf 配置文件中参数

参数修改值解释
RW_SEPARATE1是否启用读写分离。0：不启用；1：启用
RW_PERCENT25读写分离分发比例，有效值范围0~100

五、验证

1.主库创建表并插入数据，查看备库是否可以接收到
主库创建表

插入数据，并提交


查看备机是否有此表存在

社区地址：https://eco.dameng.com

qq_44341533
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
达梦dem搭建读写分离注册服务_达梦7读写分离搭建过程详解
weixin_30575517的博客
12-30 214
一、主备介绍读写分离集群是基于即时归档实现的高性能数据库集群，不但提供数据保护、容灾等数据守护基本功能，还具有读写操作自动分离、负载均衡等特性。读写分离集群最多可以配置8个即时备库，提供数据同步、备库故障自动处理、故障恢复自动数据同步等功能，也支持自动故障切换和手动故障切换两种守护模式。一般情况下，应用系统中查询等只读操作的比例远大于Insert/Delete/Update等DML操作，修改对象定...
达梦数据守护同步模式
qq_40135088的博客
12-14 1403
仅为个人学习记录 一、数据守护主备同步模式 1、类似oracle的数据保护模式：最大保护、最大可用、最大性能 2、达梦主备同步模式分为：事务一致模式和高性能模式 由dmarch.ini配置文件中的ARCH_WAIT_APPLY 配置项决定 为0表示高性能模式 为1表示事务一致模式 3、事务一致模式： 主库事务提交触发 Redo 日志刷盘和即时归档， 备库收到主库发送的 Redo 日志，并重演完成后再响应主库。 主库收到备库响应消息后，再响应用户的提交请求。 事务一致模式下，同一个事务
达梦配置文件详解
cn_lyt的博客
01-22 2787
达梦配置文件为一组ini类型的文件，是一组用于定义数据库开放功能及数据库性能的文本文件，一般存储于数据库安装根目录下。各配置文件同达梦产品线关系如下图所示： 1. dm .ini 最基本的配置文件，每创建一个数据库，都会生成一个dm.ini配置文件。且和数据库的启动有着直接关系。用于启动时设置数据库功能及性能。dmarch.ini及sqllog.ini配置文件分别依赖于dm.ini中的ARCH_INI及SVR_LOG，默认均不开启（默认为0，开启为1）。可使用自动化脚...
达梦DM-开启归档模式的三种方式
qq_39631768的博客
11-02 1856
DM数据库开启归档模式的三种方式1.数据库归档1.1 检查数据库归档1.2 配置数据库归档模式1.2.1 SQL命令联机配置1.2.2 使用客户端管理工具配置1.2.3 手工修改配置文件1.3 归档信息常用数据字典1.3.1 V$ARCHIVED_LOG1.3.2 V$DM_ARCH_INI 在生产和测试环境中，为了保证数据库的安全性，我们经常需要开启数据库为归档模式，达梦数据库开启归档模式的方式有多种，本章主要介绍开启归档模式的相关方法和常用数据字典。 本章的测试环境： 操作系统: centos 7 64
修复达梦数据库(DM8)读写分离集群的脑裂问题
lizzz_的博客
05-28 989
一、脑裂 1、脑裂的介绍 脑裂是同一个守护进程组中同时出现两个或者多个活动主库，并且这些主库都接收用户 请求，提供完整数据库服务。一旦发生脑裂，将无法保证数据一致性，对数据安全造成严重 后果。 DM 数据守护系统为预防脑裂做了大量工作，例如故障自动切换模式的数据守护必须配置确认监视器。确认监视器启动故障切换之前，会进行严格的条件检查，避免脑裂发生。守护进程一旦检测到脑裂发生，会马上强制退出主库，等待用户干预，避免数据差异进一步扩大。 2、产生脑裂的原因 造成脑裂的主要原因有两个：网络不稳定或错误的人工干预。
DM8 读写分离适配经验
06-24
【DM8 读写分离适配经验】 在大型企业级应用中，数据库的读写分离是一种常见的优化策略，它可以提高系统的并发处理能力，减轻主库的压力，保证数据的一致性。达梦数据库（DM8）提供了这样的功能，下面将详细介绍DM8...
DM7数据守护与读写分离集群
08-30
DM7数据守护与读写分离集群
达梦数据库DM8读写分离集群部署
01-27
达梦数据库DM8读写分离集群部署 达梦数据库DM8读写分离集群部署是指在达梦数据库DM8中实现读写分离和集群...通过这些步骤和配置，我们可以搭建一个高可用性的达梦数据库DM8读写分离集群，以提高数据库的性能和可用性。
DM 数据守护与读写分离集群
09-24
DM 数据守护与读写分离集群DM 数据守护与读写分离集群DM 数据守护与读写分离集群DM 数据守护与读写分离集群
达梦数据库注册服务的3种方法
weixin_43897817的博客
09-09 3993
1.图形化注册服务 2.使用脚本注册服务 3.手动注册服务
达梦数据库服务注册
m0_57398926的博客
07-28 1064
达梦
数据守护搭建-配置备库和监视器
weixin_42447367的博客
02-22 209
数据守护搭建 配置备库 重新增加一台虚拟机作为备库db_02 修改db_02的内网配置并增加一个网卡作为外网。 内网： TYPE=Ethernet BOOTPROTO=static IPV4_FAILURE_FATAL=yes IPV6INIT=no NAME=eth0 UUID=8af4cab8-1544-4eee-b124-cac50ed5213b DEVICE=eth0 ONBOOT=yes HWADDR=00:0C:29:EC:5E:1C IPADDR=192.168.74.11 外网： TYPE=
达梦 dm.ini 设置实例文件
weixin_44265105的博客
08-23 2775
#DaMeng Database Server Configuration file #this is comments #file location of dm.ctl CTL_PATH = /TRS/data/DAMENG/dm.ctl #ctl file path CTL_BAK_PATH = /TRS/data/DAMENG/ctl_bak #dm.ctl backup...
DSC+异步备机测试
最新发布
weixin_45260302的博客
10-18 840
DSC+异步备机测试
达梦数据库注册服务
weixin_39974950的博客
01-29 1258
注册/删除服务 注册/删除服务包括：dmimon,dmap,dmserver,dmwatcher,dmmonitor,dmcss,dmcssm,dmasmsvr,dmdcs,dmdrs,dmdras,dmdss 注册/删除服务需要在root用户下执行 图形化注册/删除： cd $DM_HOME/tool ./dbca.sh 选择参数配置文件，数据库相关信息会自动填充。 命令行注册服务 cd .../script/root ./dm_service_installer.sh ...
2021-08-05 达梦数据库注册与卸载服务
m0_59352042的博客
08-05 477
在现实使用环境中，如果 Linux(Unix)系统重启，用户希望在操作系统启动时能够自 动启动某些应用程序的进程。为了达到这种功能就必须为这些应用程序编写服务脚本，并注册成操作系统服务。在以上的内容，已经讲解了 DM 所提供的服务脚本种类，参数修改和使用说明。以下内容将详细讲解把 DM 服务脚本注册成操作系统服务的方法。
达梦dem搭建读写分离注册服务_达梦数据库+XSKY，释放数据价值
weixin_28710999的博客
01-02 133
日前,武汉达梦数据库有限公司(以下简称“达梦公司”)与星辰天合(北京)数据科技有限公司(XSKY)签署了战略合作协议。双方将共同释放创新活力,推动各自核心产品或解决方案的相互融合及市场拓展,致力于建设可持续发展的数据产业链,凝聚合力,为各行业提供全面的产品和服务,以数据赋能助力中国企业数字化转型。01聚焦数据,释放创新活力面对移动互联、大数据、人工智能技术的快速发展,各行业也开始主动求变,希望通过...
达梦数据库如何使用备份还原的方式恢复主备集群
键盘上的艺术
02-21 774
前言：当主备库所在的硬件出现故障、或者数据库文件损坏导致数据毁损时，我们可以使用多种方式来恢复主备库。重建库要选定一个当前有效库或者一个历史备份。下面我们以备库数据损坏为例，通过备份还原的方式来恢复主备集群。 1.重新初始化数据库 进入到数据库安装bin目录下，初始化库 2.登录主库，使用disql工具联机备份 3.将备份文件拷贝到备库所在的机器，进行脱机还原与恢复(备注：要使用dmdba的用...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值