DM7两节点读写分离主备集群搭建

最新推荐文章于 2023-01-12 13:49:55 发布
最新推荐文章于 2023-01-12 13:49:55 发布
阅读量197 收藏
点赞数
文章标签： 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_59352042/article/details/120342303
版权

读写分离集群由一个主库以及一个或者多个配置了即时（Timely）归档的备库组成，其主要目标是在保障数据库可用性基础上，实现读、写操作的自动分离，进一步提升数据库 的业务支撑能力。读写分离集群通过即时归档机制保证主、备库数据一致性，并配合达梦数 据库管理系统的各种接口（JDBC、DPI等），将只读操作自动分流到备库，有效降低主库的 负载，提升系统吞吐量

环境准备

主机

ip地址

实例名

主备

操作系统

hx1

192.168.1.10

RW_01

主库

CentOS

hx2

192.168.1.11

RW_02

备库

CentOS

hx3

192.168.1.12

RW_03

监视器

CentOS

初始化数据库

主库：./dminit path=/home/dmdba/dmdbms/data db_name=RW_1 page_size=32 extent_size=16 case_sensitive=y

备库：./dminit path=/home/dmdba/dmdbms/data db_name=RW_1 page_size=32 extent_size=16 case_sensitive=y

分别启停主备数据库

./dmserver /home/dmdba/dmdbms/data/RW_1/dm.ini

进行备份还原

主库上备份：

./dmrman ctlstmt="BACKUP DATABASE '/home/dmdba/dmdbms/data/RW_1/dm.ini' FULL TO BACKUP_FILE1 BACKUPSET '/home/dmdba/back/DAMENG'"

发送到备库进行还原

./dmrman ctlstmt="RESTORE DATABASE '/home/dmdba/dmdbms/data/RW_1/dm.ini' FROM BACKUPSET '/home/dmdba/back'"

数据恢复

./dmrman ctlstmt="RECOVER DATABASE '/home/dmdba/dmdbms/data/RW_1/dm.ini' FROM BACKUPSET '/home/dmdba/back'"

配置主库

修改dm.ini文件
INSTANCE_NAME= RW_1
ALTER_MODE_STATUS = 0
ENABLE_OFFLINE_TS = 2
MAL_INI = 1
ARCH_INI = 1
配置dmmal.ini文件
MAL_CHECK_INTERVAL    = 5
MAL_CONN_FAIL_INTERVAL    = 5

[MAL_INST1]
MAL_INST_NAME    = RW_1
MAL_HOST    = 192.168.1.10
MAL_PORT    = 5237
MAL_INST_HOST    = 192.168.1.10
MAL_INST_PORT    = 5236
MAL_DW_PORT    = 5238
MAL_INST_DW_PORT= 5239

[MAL_INST2]
MAL_INST_NAME   = RW_1
MAL_HOST        = 192.168.1.11
MAL_PORT        = 5237
MAL_INST_HOST   = 192.168.1.11
MAL_INST_PORT   = 5236
MAL_DW_PORT     = 5238
MAL_INST_DW_PORT= 5239
配置 dmarch.ini
ARCH_WAIT_APPLY = 1
[ARCHIVE_TIMELY1]
ARCH_TYPE       = TIMELY
ARCH_DEST       = RW_1

[ARCHIVE_LOCAL1]
ARCH_TYPE       = LOCAL
ARCH_DEST       = /home/dmdba/dmdbms/data/RW_1/arch
ARCH_FILE_SIZE  = 128
ARCH_SPACE_LIMIT= 0
配置dmwatcher.ini文件
[GRP1]
DW_TYPE                 = GLOBAL
DW_MODE                 = MANUAL
DW_ERROR_TIME           = 10
INST_RECOVER_TIME       = 60
INST_ERROR_TIME         = 10
INST_OGUID              = 453332
INST_INI                = /home/dmdba/dmdbms/data/RW_1/dm.ini
INST_AUTO_restart       = 1
INST_STARTUP_CMD    = /home/dmdba/dmdbms/bin/DmServiceDMSERVER restart
RLOG_SEND_THRESHOLD     = 0
RLOG_APPLY_THRESHOLD    = 0
生成dmwatcher.ctl并发送到备库
./dmctlcvt TYPE=3 SRC=/home/dmdba/dmdbms/data/RW_1/dmwatcher.ini DEST=/home/dmdba/dmdbms/data/RW_1
启动主库
以 Mount 方式启动主库
./dmserver /home/dmdba/dmdbms/data/RW_1/dm.ini mount
设置 OGUID、修改数据库模式
启动命令行工具 disql
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL>sp_set_oguid(453332);
SQL>alter database primary;
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);
 

配置备库
修改dm.ini文件
INSTANCE_NAME = RW_1
ALTER_MODE_STATUS = 0
ENABLE_OFFLINE_TS = 2
MAL_INI = 1
ARCH_INI = 1
配置dmmal.ini文件
配置MAL系统，各主备库的 dmmal.ini 配置必须完全一致，MAL_HOST 使用内部网络IP，MAL_PORT与dm.ini中PORT_NUM 使用不同的端口值，MAL_DW_PORT 是各实例对应的守护进程之间，以及守护进程和监视器之间的通信端口。
MAL_CHECK_INTERVAL    = 5
MAL_CONN_FAIL_INTERVAL    = 5

[MAL_INST1]
MAL_INST_NAME    = RW_1
MAL_HOST    = 192.168.1.10
MAL_PORT    = 5237
MAL_INST_HOST    = 192.168.1.10
MAL_INST_PORT    = 5236
MAL_DW_PORT    = 5238
MAL_INST_DW_PORT= 5239

[MAL_INST2]
MAL_INST_NAME   = RW_1
MAL_HOST        = 192.168.1.11
MAL_PORT        = 5237
MAL_INST_HOST   = 192.168.1.11
MAL_INST_PORT   = 5236
MAL_DW_PORT     = 5238
MAL_INST_DW_PORT= 5239
配置 dmarch.ini
ARCH_WAIT_APPLY = 1
[ARCHIVE_TIMELY1]
ARCH_TYPE       = TIMELY
ARCH_DEST       = RW_1

[ARCHIVE_LOCAL1]
ARCH_TYPE       = LOCAL
ARCH_DEST       = /home/dmdba/dmdbms/data/RW_1/arch
ARCH_FILE_SIZE  = 128
ARCH_SPACE_LIMIT= 0
配置dmwatcher.ini文件
[GRP1]
DW_TYPE                 = GLOBAL
DW_MODE                 = MANUAL
DW_ERROR_TIME           = 10
INST_RECOVER_TIME       = 60
INST_ERROR_TIME         = 10
INST_OGUID              = 453332
INST_INI                = /home/dmdba/dmdbms/data/RW_1/dm.ini
INST_AUTO_restart       = 1
INST_STARTUP_CMD    = /home/dmdba/dmdbms/bin/DmServiceDMSERVER restart
RLOG_SEND_THRESHOLD     = 0
RLOG_APPLY_THRESHOLD    = 0
启动备库
以 Mount 方式启动备库
./dmserver /dm/data/DAMENG/dm.ini mount
设置 OGUID、修改数据库模式
启动命令行工具 disql
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL>sp_set_oguid(453331);
SQL>alter database standby;
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);
配置监视器
在rw3上安装达梦数据库，并创建dmmonitor.ini文件，内容如下：
MON_DW_CONFIRM = 1
MON_LOG_PATH = /home/dmdba/dmdbms/mon_log
MON_LOG_INTERVAL = 60
MON_LOG_FILE_SIZE = 32
MON_LOG_SPACE_LIMIT = 0
[GRP_SP]
MON_INST_OGUID = 453332
MON_DW_IP = 192.168.1.10:5238
MON_DW_IP = 192.168.1.11:5238
启动守护进程
主库 ./dmwatcher /home/dmdba/dmdbms/data/RW_1/dmwatcher.ini
备库 ./dmwatcher /home/dmdba/dmdbms/data/RW_1/dmwatcher.ini

启动监视器

[dmdba@rw3 bin]$ ./dmmonitor dmmonitor.ini

测试

主库插入数据

备库查询

备库查询到数据说明配置正常。

遇到的问题

启动监视器报错：

code=-6010, oguid or group_name mismatch, please check config!!!

定位：监视器中的组名和dmwatcher.ini中不一致导致启动报错，修改成一致后启动正常

备份报错：

未启动dmap导致备份失败，启动dmap即可备份成功

爱学习的小鑫
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
DM7一主两备数据库搭建以及故障演练
weixin_42447367的博客
04-01 652
一、环境 服务器ip 数据库状态 内存 10.111.77.79 主库 31G 10.111.77.80 备库 31G 10.111.77.81 备库 31G 数据库安装包DMInstall.bin 二、部署一主两备（79/80/81）： 2.1、分别在3台服务器上安装数据库软件 cd /opt [dmdba@YNKJ-XZZHGLXT7779 opt]$ ./DMInstall.bin -i 2.2、在1
DM7数据库主备集群脑裂解决办法
qq_30726849的博客
09-29 829
由于主备集群的网络出现故障导致DM确认监视器认为主库出现故障，从而自动切换备库为主库，运行一段时间后主库恢复通信，此时存在两个主库且版本不一致（file_LSN及数据魔数不一致），最终演变成脑裂。 解决方案：经咨询DM技术人员，DM脑裂无法通过修改配置恢复正常集群，只能通过数据文件或者数据库备份恢复单实例数据库并重新搭建主备集群（好麻烦）。同时，查询主备两个数据库的file_LSN，数值较大的为更...
DM7数据守护集群部署
xiaoke_2013的博客
01-12 191
达梦7数据守护集群部署
DM7 主备集群搭建
weixin_50168895的博客
03-01 265
DM7 主备集群搭建 1.关闭防火墙 2.准备两台初始化的库，进行脱机数据一致性操作 A节点： ./dmrman CTLSTMT="BACKUP DATABASE '/dm7/data/DAMENG/dm.ini' FULL TO BACKUP_FILE1 BACKUPSET '/dm7/data/BACKUP_FILE_01'" 拷贝备份文件到备库所在机器 进行还原 ./dmrman CTLSTMT="RESTORE DATABASE '/dm7/data/DAMENG/dm.ini' FROM BAC
国产数据库之达梦数据库 - DM7 MPP集群安装配置
weixin_34399060的博客
06-30 2371
武汉达梦数据库作为国产数据库较有代表性的企业，在数据库研发方面投入了大量的精力，其自主研发的达梦数据库DM7，除了具有单机版可与Oracle相媲美的能力外，同时也研发了一款无共享MPP架构的数据库软件，主要面向在线分析（OLAP）领域。 下面的分享主要参考和使用达梦公司官网提供的下载包及安装文档，感兴趣的同学请自行下载。下载链接：http://www....
DM7数据守护与读写分离集群
08-30
DM7数据守护与读写分离集群
DM8数据守护与读写分离集群V4.0
05-07
DM8数据守护与读写分离集群V4.0
达梦数据库三节点读写分离集群部署文档
最新发布
06-06
达梦数据库三节点读写分离集群部署文档 通过项目实战详细记录部署过程及关键点，适用于研究达梦集群的人群使用
达梦数据库DM8读写分离集群部署
01-27
在本例中，我们计划搭建一个由一主二从三节点组成的读写分离集群。 环境虚拟机：VMWARE 16系统：CentOS Linux release 7.8.2003 (Core) 磁盘：每台 20G 内存：每台 2G 网卡：单网卡，仅主机模式 安装 dm 数据库...
达梦8主备集群搭建部署
07-22
达梦8主备集群搭建部署是指在两个节点上安装达梦数据库软件，并配置主备数据库实例，实现数据备份和还原，最后配置集群文件来实现高可用性。下面是达梦8主备集群搭建部署的详细步骤和知识点： 一、安装数据库软件 ...
达梦7实时主备集群搭建
weixin_39053024的博客
09-28 445
达梦7实时主备集群搭建 前言 实时主备系统由主库、实时备库、守护进程和监视器组成。通过部署实时主备系统，可以及时检测并处理各种硬件故障、数据库实例异常，确保持续提供数据库服务。主备库通过实时归档完成数据同步，主库产生的 Redo日志传输到备库，备库接收并重演Redo日志，从而实现备库与主库的数据同步。 一、安装达梦数据库软件 1）主备都需要安装同版本的软件（本文以DM7为例，可参考：达梦单机数据库Linux环境下安装卸载） 2）监视器安装在第三台安装有达梦数据库软件的服务上，也可以安装在备库上。 3）双网
DM7 达梦 数据库 数据守护(Data Watch) -- 实时主备环境搭建
csdnccs的博客
06-11 2370
1 环境说明 本示例中组名为“GRP1”，配置为实时主备，主库命名为“GRP1_RT_01 ”，备库命名为“GRP1_RT_02 ”。 配置环境说明: 主机类型 IP地址 实例名 操作系统 主库 192.168.80.161 （外部服务） 192.168.227.161（内部通信） GRP1_RT_01 ...
达梦数据库实时主备环境的搭建(DM7)
键盘上的艺术
03-11 1692
1 环境说明 各主备库的实例名建议采用“组名_守护环境_序号”的方式命名，方便按组区分不同实 例，注意总长度不能超过16。本示例中组名为“GRP1”，配置为实时主备，主库命名为“GRP1_DM_01”，备库命名为“GRP1_DM_02”。 配置环境说明: 主机类型 IP地址 实例名 操作系统 主库 10.10.35.114（外部服务）1.1.1.10（内部通信） GRP1_DM_0...
【dmmonitor启动异常总结】
qq_32144799的博客
01-24 773
个人总结
达梦数据库的主备搭建
weixin_45873177的博客
11-13 1801
2019年11月13日达梦DCA培训学习作业。作者：钟X威。 以下是我搭建达梦主备的一些经验心得。 硬件准备 两台 rhel 6.x linux 服务器。 软件准备 达梦数据库软件 7.1.6.96 企业版。 搭建前准备-数据准备 两台RHEL6.0服务器安装达梦7.1.6.96数据库，分别创建实例为dm1,dm2。 主库配置 disql sysdba 进入数据库 运行联机备份命令 BA...
DM8 达梦数据库RWC读写分离集群搭建（二节点）
meminic的博客
08-23 242
本文主要介绍DM8 达梦数据库只读分离集群（二节点）的搭建。 1 DM8数据库单库安装 安装步骤忽略 2 初始化实例 3 启动数据库前台服务 4 开始归档模式 读写分离集群就是用归档日志来同步备机的数据的。 5 备份数据 6 修改dm.ini参数 7 关闭数据库服务 为了确保两个库的数据一致性，先关闭主节点的数据库服务 8 修改A节点dmarch.ini文件 文件路径/dm8/data/DAMENG/dmarch.ini 9 创建dmmal.ini文件 ..
Redis高可用技术解决方案
eagle89的专栏
09-15 733
Redis 的几种常见使用方式包括： Redis 单副本 Redis 多副本（主从） Redis Sentinel（哨兵） Redis Cluster Redis 自研 客户端分片 Twemproxy Codis 云服务器上的集群服务 各种使用方式的优缺点 Redis 单副本 Redis 单副本，采用单个 Redis 节点部署架构，没有备用节点实时同步数据，不提供数据持久化和备份策略，适用于数据可...
DM7数据守护搭建过程中及错误处理
m0_56771917的博客
07-01 1082
1.在配置过程中，主库无法启动报错DM Listener 's unable to listen on socket :98 出现此报错通常为配置文件端口配置错误导致，仔细检查端口号是否配错或重复。 2.启动监视器报错oguid or group_name mismatch, please check config！..................
在红帽上搭建dm7的主备的一些问题
zjh982534314的博客
08-19 188
在redhat 6.5上搭建DM主备的问题:dmwatcher.ctl文件缺失FILE_LSN 、CUR_LSN和PERMANENT_MAGIC值主备机不同组分裂配置完后dmserver启动失败 dmwatcher.ctl文件缺失 dmwatcher.ctl文件缺失，在dm8上是不会有这个问题的。但在dm7，这个文件确实要自己生成的 在达梦安装目录下进行 // An highlighted block cd /dm7/bin ./dmctlcvt type=3 src=/dm7/data/DAMENG/dm
使用docker搭建dm主备集群
05-24
首先，需要安装Docker和Docker Compose。然后按照以下步骤操作： 1. 创建两个文件夹，分别为dm-master和dm-worker，用于存放主节点和从节点的配置文件。 2. 在dm-master文件夹中创建docker-compose.yml文件，并添加以下内容： ``` version: '3' services: dm-master: image: pingcap/dm:latest container_name: dm-master volumes: - ./dm-master:/etc/dm-master ports: - "8261:8261" - "8291:8291" command: dm-master -config /etc/dm-master/dm-master.toml ``` 3. 在dm-master文件夹中创建dm-master.toml配置文件，并添加以下内容： ``` [log.file] filename = "/var/log/dm-master.log" [log.level] value = "info" [server] addr = ":8261" advertise-addr = "master_ip:8261" data-dir = "/data/dm-master" name = "dm-master" [dumpling-worker] worker-addr = "worker_ip:8262" password = "password" [security] ssl-ca = "/etc/dm-master/ca.pem" ssl-cert = "/etc/dm-master/server-cert.pem" ssl-key = "/etc/dm-master/server-key.pem" ``` 注意将master_ip和worker_ip替换为实际的IP地址，并设置密码。 4. 在dm-worker文件夹中创建docker-compose.yml文件，并添加以下内容： ``` version: '3' services: dm-worker: image: pingcap/dm:latest container_name: dm-worker volumes: - ./dm-worker:/etc/dm-worker ports: - "8262:8262" command: dm-worker -config /etc/dm-worker/dm-worker.toml ``` 5. 在dm-worker文件夹中创建dm-worker.toml配置文件，并添加以下内容： ``` [log.file] filename = "/var/log/dm-worker.log" [log.level] value = "info" [server] addr = ":8262" advertise-addr = "worker_ip:8262" data-dir = "/data/dm-worker" name = "dm-worker" [worker] addr = ":8262" password = "password" [security] ssl-ca = "/etc/dm-worker/ca.pem" ssl-cert = "/etc/dm-worker/server-cert.pem" ssl-key = "/etc/dm-worker/server-key.pem" ``` 注意将worker_ip替换为实际的IP地址，并设置密码。 6. 在dm-master文件夹中创建ca.pem、server-cert.pem和server-key.pem证书文件，并将它们复制到dm-worker文件夹中。 7. 最后，在终端中进入dm-master文件夹，并执行以下命令启动主节点： ``` docker-compose up -d ``` 8. 在终端中进入dm-worker文件夹，并执行以下命令启动从节点： ``` docker-compose up -d ``` 现在，您已经成功地使用Docker搭建了DM主备集群。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值