DM8 MPP主备集群的搭建

最新推荐文章于 2024-08-31 23:36:42 发布
最新推荐文章于 2024-08-31 23:36:42 发布
阅读量183 收藏
点赞数
文章标签： 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_40177982/article/details/108197948
版权

搭建MPP主备

  1. 老规矩先安装各个虚拟机节点上的数据库实例并进行初始化。我这里暂时只做了两个节点。
    //初始化中稍微有点不一样的，你需要在每个节点上初始化两个数据库实例，进行交叉主备的安装。
    例如节点1上初始化主库EP1和备库EP22实例
    节点2上初始化主库EP2和备库EP11实例

  2. 切换到dmdba用户进行脱机备份还原
    备份主库EP01
    [dmdba@localhost bin]$ ./dmrman ctlstmt=“backup database ‘/dm/data/DAMENG/dm.ini’ full backupset ‘/dm/data/db_full_01’”
    备份主库EP02
    [dmdba@localhost bin]$ ./dmrman ctlstmt=“backup database ‘/dm/data/DAMENG/dm.ini’ full backupset ‘/dm/data/db_full_02’”
    使用scp把备份集拷贝到相应的节点上
    [dmdba@localhost bin]$ scp -r /dm/data/db_full_02 dmdba@192.168.59.135:/dm/data
    在节点1上还原备库EP22
    [dmdba@localhost bin]$ ./dmrman ctlstmt=“restore database ‘/dm/data/EP22/DAMENG/dm.ini’ from backupset ‘/dm/data/db_full_02’”
    [dmdba@localhost bin]$ ./dmrman ctlstmt=“recover database ‘/dm/data/EP22/DAMENG/dm.ini’ from backupset ‘/dm/data/db_full_02’”
    [dmdba@localhost bin]$ ./dmrman ctlstmt=“recover database ‘/dm/data/EP22/DAMENG/dm.ini’ update db_magic”
    在节点2上还原备库EP11
    [dmdba@localhost bin]$ ./dmrman ctlstmt=“restore database ‘/dm/data/EP11/DAMENG/dm.ini’ from backupset ‘/dm/data/db_full_01’”
    [dmdba@localhost bin]$ ./dmrman ctlstmt=“recover database ‘/dm/data/EP11/DAMENG/dm.ini’ from backupset ‘/dm/data/db_full_01’”
    [dmdba@localhost bin]$ ./dmrman ctlstmt=“recover database ‘/dm/data/EP11/DAMENG/dm.ini’ update db_magic”

  3. 配置主库EP01 dm.ini、dmarch.ini、dmmal.ini、dmmpp.ctl

dm.ini
INSTANCE_NAME = EP01 #实例名总长度不能超过 16
PORT_NUM = 7236 #数据库实例监听端口
DW_INACTIVE_INTERVAL = 60 #接收守护进程消息超时时间
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态/OGUID
ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间
MAL_INI = 1 #打开 MAL 系统
ARCH_INI = 1 #打开归档配置
MPP_INI = 1 #启用 MPP 配置
RLOG_SEND_APPLY_MON = 64 #统计最近 64 次的日志发送信息

dmarch.ini
[ARCHIVE_REALTIME]
ARCH_TYPE = REALTIME #归档类型
ARCH_DEST = EP11 #归档目标实例名
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL #本地归档类型
ARCH_DEST = /dm/data #本地归档文件存放路径
ARCH_FILE_SIZE = 128 #单位Mb，本地单个归档文件最大值
ARCH_SPACE_LIMIT = 2048 #单位Mb，0表示无限制，范围1024~4294967294M

dmmal.ini
MAL_CHECK_INTERVAL= 30
MAL_CONN_FAIL_INTERVAL= 10
MAL_LOGIN_TIMEOUT= 15
MAL_BUF_SIZE= 100
MAL_SYS_BUF_SIZE= 0
MAL_VPOOL_SIZE= 128
MAL_COMPRESS_LEVEL= 0

[MAL_INST1]
MAL_INST_NAME = EP01 #实例名，和 dm.ini 中的 INSTANCE_NAME 一致
MAL_HOST = 192.168.59.135 #MAL 系统监听 TCP 连接的 IP 地址
MAL_PORT = 6237 #MAL 系统监听 TCP 连接的端口
MAL_INST_HOST = 192.168.59.135 #实例的对外服务 IP 地址
MAL_INST_PORT = 5236 #实例的对外服务端口，和 dm.ini 中的 PORT_NUM 一致
MAL_DW_PORT = 7236 #实例对应的守护进程监听 TCP 连接的端口
MAL_INST_DW_PORT = 8236 #实例监听守护进程 TCP 连接的端口

[MAL_INST2]
MAL_INST_NAME= EP02
MAL_HOST= 192.168.59.136
MAL_PORT= 6237
MAL_INST_HOST= 192.168.59.136
MAL_INST_PORT= 5236
MAL_DW_PORT = 7236
MAL_INST_DW_PORT = 8236

#添加备库信息
[MAL_INST11]
MAL_INST_NAME= EP11
MAL_HOST= 192.168.59.136
MAL_PORT= 6238
MAL_INST_HOST= 192.168.59.136
MAL_INST_PORT= 6236
MAL_DW_PORT = 7237
MAL_INST_DW_PORT = 8237

[MAL_INST22]
MAL_INST_NAME= EP22
MAL_HOST= 192.168.59.135
MAL_PORT= 6238
MAL_INST_HOST= 192.168.59.135
MAL_INST_PORT= 6236
MAL_DW_PORT = 7237
MAL_INST_DW_PORT = 8237
//这里需要注意的是，同一个服务器下数据库的不通实例的端口号不能一样。

dmmpp.ini
[service_name1]
mpp_seq_no = 0
mpp_inst_name = EP01
[service_name2]
mpp_seq_no = 1
mpp_inst_name = EP02
//由于我们需要的是dmmpp.ctl二进制文件
所以我们需要使用dm自带的dmctlcvt工具转换其为二进制文件
[dmdba@localhost bin]$ ./dmctlcvt type=2 src=/dm/data/DAMENG/dmmpp.ini dest=/dm/data/DAMENG/dmmpp.ctl
该文件需要跟dm.ini在一个文件夹下。

  1. 拷贝dmmal.ini、dmarch.ini、dmmpp.ctl到各个节点的各个实例中
    [dmdba@localhost DAMENG]$ scp dmmal.ini dmarch.ini dmmpp.ctl dmdba@192.168.59.136:/dm/data/DAMENG/

[dmdba@localhost DAMENG]$ scp dmmal.ini dmarch.ini dmmpp.ctl dmdba@192.168.59.136:/dm/data/EP11/DAMENG/

[dmdba@localhost DAMENG]$ cp dmmal.ini dmarch.ini dmmpp.ctl /dm/data/EP22/DAMENG/

  1. 配置主库EP02参数
     修改dm.ini中对应参数
     修改dmarch.ini中对应参数
     dmmal.ini不用修改

  2. 配置备库EP11参数
     修改dm.ini参数，且确保梳理端口与同节点上的实例端口号不同。
     修改dmarch.ini参数
     dmmal.ini不用修改

  3. 配置备库EP22参数
     修改dm.ini参数，且确保梳理端口与同节点上的实例端口号不同。
     修改dmarch.ini参数
     dmmal.ini不用修改

  4. 配置守护进程
    //正常情况下，一个实例一个守护进程。但是我设置的是一台机器两个实例，所以我可以配置一个dmwatcher守护两个实例。

 节点1上在主库EP01的DAMENG目录下创建dmwatcher.ini
[GRP1]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 45331 #守护系统唯一OGUID值
INST_INI = /dm/data/DAMENG/dm.ini #dm.ini配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /dm/dmdbms/bin/dmserver #命令行方式启动
//这一行有点问题，如果要自动启动数据库服务的话，应该改为如下
INST_STARTUP_CMD = /dm/dmdbms/bin/dmserver /dm/data/DAMENG/dm.ini
或者（已经注册服务，可以使用）
INST_STARTUP_CMD = service DmServiceEP01
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阀值，默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阀值，默认关闭

[GRP2]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 45332 #守护系统唯一OGUID值
INST_INI = /dm/data/EP22/DAMENG/dm.ini #dm.ini配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /dm/dmdbms/bin/dmserver #命令行方式启动
//这一行有点问题，如果要自动启动数据库服务的话，应该改为如下
INST_STARTUP_CMD = /dm/dmdbms/bin/dmserver /dm/data/EP22/DAMENG/dm.ini
或者（已经注册服务，可以使用）
INST_STARTUP_CMD = service DmServiceEP22
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阀值，默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阀值，默认关闭

 在节点2主库EP02上配置dmwatcher.ini
[GRP1]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 45332 #守护系统唯一OGUID值
INST_INI = /dm/data/DAMENG/dm.ini #dm.ini配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /dm/dmdbms/bin/dmserver #命令行方式启动
//这一行有点问题，如果要自动启动数据库服务的话，应该改为如下
INST_STARTUP_CMD = /dm/dmdbms/bin/dmserver /dm/data/DAMENG/dm.ini
或者（已经注册服务，可以使用）
INST_STARTUP_CMD = service DmServiceEP02
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阀值，默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阀值，默认关闭

[GRP2]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 45331 #守护系统唯一OGUID值
INST_INI = /dm/data/EP11/DAMENG/dm.ini #dm.ini配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /dm/dmdbms/bin/dmserver #命令行方式启动
//这一行有点问题，如果要自动启动数据库服务的话，应该改为如下
INST_STARTUP_CMD = /dm/dmdbms/bin/dmserver /dm/data/EP11/DAMENG/dm.ini
或者（已经注册服务，可以使用）
INST_STARTUP_CMD = service DmServiceEP11
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阀值，默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阀值，默认关闭

  1. 配置监视器
    //将两个主备放在一个监视器里面
    在节点1 新建/dm/monitor 和 /dm/monitor/log文件夹

[dmdba@localhost DAMENG]$ mkdir /dm/monitor
[dmdba@localhost DAMENG]$ mkdir /dm/monitor/log
[dmdba@localhost DAMENG]$ chown -R dmdba:dinstall /dm/monitor/

新建dmmonitor.ini文件

MON_DW_Confirm = 1 #确认监视器模式
MON_LOG_PATH = /dm/monitor/log #监视器日志文件存放路径
MON_LOG_INTERVAL = 60 #每隔60s定时记录系统信息到日志文件
MON_LOG_FILE_SIZE = 32 #每个日志文件最大32M
MON_LOG_SPACE_LIMIT = 0 #不限定日志文件总占用空间

[GRP1]
MON_INST_OGUID = 45331 #组GRP1的唯一OGUID值
#以下配置为监视器到组GRP1的守护进程的连接信息，以“IP:PORT”的形式配置
#IP对应dmmal.ini中的MAL_HOST，PORT对应dmmal.ini中的MAL_DW_PORT
MON_DW_IP = 192.168.59.135:5236
MON_DW_IP = 192.168.59.136:6236

[GRP2]
MON_INST_OGUID = 45332 #组GRP2的唯一OGUID值
MON_DW_IP = 192.168.59.136:5236
MON_DW_IP = 192.168.59.135:6236

  1. 开启主备库，更改oguid值，以及数据库状态。
    //注意因为是MPP集群下的实时主备，所以如果想启动一个实例，必须把所有实例都mount打开
    //或者你可以本地打开
    [root@localhost bin]# ./disql SYSDBA/SYSDBA*local@192.168.59.135:5236

 更改EP01上的oguid的值，更改其状态为primary。
sp_set_para_value(1,‘alter_mode_status’,1)
sp_set_oguid(45331);
alter database primary;
sp_set_para_value(1,‘alter_mode_status’,0);

 更改EP11上的oguid的值，并更改其状态为standby。
sp_set_para_value(1,‘alter_mode_status’,1)
sp_set_oguid(45331);
alter database standby;
sp_set_para_value(1,‘alter_mode_status’,0);

 更改EP02上的oguid的值，更改其状态为primary。
sp_set_para_value(1,‘alter_mode_status’,1)
sp_set_oguid(45332);
alter database primary;
sp_set_para_value(1,‘alter_mode_status’,0);

 更改EP22上的oguid的值，并更改其状态为standby。
sp_set_para_value(1,‘alter_mode_status’,1)
sp_set_oguid(45332);
alter database standby;
sp_set_para_value(1,‘alter_mode_status’,0);

  1. 启动守护进程

节点1
[root@localhost bin]# ./dmwatcher /dm/data/DAMENG/dmwatcher.ini
节点2
[root@localhost bin]# ./dmwatcher /dm/data/DAMENG/dmwatcher.ini

  1. 分别在两个节点上注册实例服务和守护进程服务。
    ./dm_service_installer.sh –t dmserver –dm_ini /dm/data/DAMENG/dm.ini -p EP01

./dm_service_installer.sh –t dmwatcher –watcher_ini /dm/data/DAMENG/dmwatcher.ini -p EP01

//注意：由于之后每次启动数据库都要使用mount方式启动数据库服务。
所以，找到注册的服务的位置，我这里是/etc/rc.d/init.d/文件夹，使用vim命令修改服务参数的配置，使其以后每次启动都采用mount方式启动。
启动
service DmServiceEP01 start
service DmWatcherServiceTEST start

shownhx
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
达梦MPP主备集群详细搭建过程
weixin_39053024的博客
10-09 873
前言 基于主备的MPP集群在运行过程中，主机对外提供服务，备机则保持主备之间的数据同步，当主机出现故障时，备机替换主机，继续对外提供服务，保证系统的不中断和可靠性。本文以DM7的主备MPP搭建为例，首先呈现MPP主备集群示意图如下： 配置了相同OGUID的两个或多个守护进程，构成一个守护进程组。为方便管理，对每个守护进程组进行命名，守护进程组中的所有守护进程和监视器，必须配置相同的组名。 软件版本：centos7 达梦MPP主备集群搭建 (V7.6.0.184-Build(2019.08.08-11076
达梦8集群搭建及原理
m0_72231829的博客
10-14 904
架构：将主库产生的REDO日志传输的备库，备库接收并重演日志，从而实现主备库的数据同步。DM数据守护的核心思想是监控数据库状态，获取主、备数据同步情况，为REDO日志传输与重演过程中出现的各种异常情况提供一系列的解决方案。监控数据库状态、发送状态信息、监控其他守护进程消息、接收监视器消息、主备库启动运行、备库故障处理、备库异常处理、主库故障处理、故障修复处理。原理：主要是基于REDO日志传输重做，主备机各有一份自己的数据，不需要额外的共享存储，利用REDO日志传输重做来实现主备机数据一致。
DM8MPP主备集群V4.0
chenyu940415的博客
07-30 307
安装数据库：链接如下 https://blog.csdn.net/chenyu940415/article/details/107481183 初始化两个实例： A机两个实例：DM01为主库，DM021为02机主库的备库； B机两个实例：DM02为主库，DM011为01机主库的备库； 将DM01数据进行备份到DM011：（这里是联机备份） （1）对主库进行联机备份操作： [dmdba@redhat04 bin]$ ./disql SYSDBA/SYSDBA:5235 SQL>BACKUP..
DM8 大规模并行处理 MPP (MassivelyParallelProcessing) -- 环境搭建和使用
jisen_huang的专栏
03-16 619
一、环境说明 本例配置一个两节点 MPP。两个节点都配置两块网卡，一块接入内部网络交换模块，一 块接入到外部交换机。 两节点实例名分别为 EP01 和 EP02，相关的 IP、端口等规划见下表。 实例名 MAL_INST_HOST MAL_INST_PORT MAL_HOST MAL 端口 MPP_SEQNO EP01 dmmpp1 ...
【DM8】配置普通MPP集群
weixin_33209489的博客
09-01 163
首先在两个节点分别安装DM8，并分别初始化实例。 1 配置dm.ini EP01 EP02 2 配置dmmal.ini EP01，EP02配置相同 3 配置dmmpp.ctl EP01，EP02配置相同 配置dmmpp.ini，然后利用dmctlcvt工具转换得到dmmpp.ctl文件。 4 启动实例 分别启动EP01，EP02实例 ...
DM8大规模并行处理MPP产品介绍
SuChenghe的博客
11-18 342
DM8大规模并行处理MPP产品介绍 DM8 MPP是一种并行数据库。并行数据库要求可能并行执行所有的数据库操作，从而提高数据库系统的性能。根据所在计算机的处理器、内存及存储设备的相互关系，并行数据库可归纳为三种基本的体系架构：共享内存结构（Shared-Memory）、共享磁盘结构（Shared-Disk）和无共享资源结构（Shared-Nothing）。  Shared-Memory 简单的说，Shared-Memory是指一套系统中有多个处理器、一个共享内存以及多个磁盘存储，所有的处理器通过高速通信网
在虚拟机cetos7上搭建2节点dsc-动态搭建dsc第三个节点
hu5350026的专栏
05-28 209
二节点的搭建请参考其他博客《在虚拟机cetos7上搭建2节点dsc（一）》，以下内容主要介绍在2节点正常运行的的基础，动态扩展dsc节点 添加共享磁盘 使用root用户，fdisk -l，查看磁盘 执行编辑/etc/udev/rules.d/60-raw.rules 文件，增加以下语句： ACTION=="add" , KERNEL=="sdb1", RUN+="/bin/raw /dev/raw/raw1 %N" ACTION=="add", KERNEL=="sdb2", RUN+="/b
MPP集群基本概念和搭建
m0_72231829的博客
11-11 308
为了支持海量数据存储和处理，高并发处理，高可用性等需求，提供高端数据仓库解决方案，DM提供了大规模并行处理MPP架构。
达梦DMMPP主备集群搭建
a_zhangxuan的博客
07-25 549
达梦DMMPP主备集群
DM8数据守护安装配置
03-29
达梦8的数据守护安装配置教程，一步一步教你进行数据守护的安装配置，希望各位能够从中学习到自己的知识，
达梦数据库主备集群之间配置DBLINK外部链接
qq_36192280的博客
12-30 356
一、环境信息 二、配置说明：配置dblink通过mal进行通信，需要配置各个节点的dmmal相互之间能够通讯，对于集群之间，各个节点的 dmmal.ini必须完全保持一致，且各个节点instance_name不同。 示例dmmal.ini配置如下： #DaMeng Database Mail Configuration file #this is comments MAL_CHECK_INTERVAL = 5 MAL_COMBIN_BUF_SIZE = 0 MAL_CONN_FAIL_
DM8大规模并行处理MPP集群搭建
juracka的博客
12-11 297
DM8大规模并行处理MPP集群搭建搭建环境和规划数据准备修改配置文件启动数据库，设置OGUID，修改数据库模式启动守护进程和监视器 搭建环境和规划 本次搭建集群使用中标麒麟7.0和达梦8.1； A上的主库备份到B；B上的主库备份到C；C上的主库备份到A； 机器名 IP 数据库 A 192.168.1.2 GRP1_MPP_EP01 192.168
达梦数据库搭建DMDSC集群遇到的问题及解决方法（二）
weixin_42447367的博客
08-22 892
[dmdba@redhat bin]$ ./dmcss DCR_INI=/home/dmdba/data/dmdcr.ini Read ini file(/home/dmdba/data/dmdcr.ini) error in line 6, code(-802) dmcss startup failed:[CODE:-802],error info:非法INI配置参数 这个问题指向的是我的在dmdcr.ini文件中的第6行出现了非法的ini配置参数，原因是ini文件里面有非法字符。 解决方法：按照下图的方
国产数据库之达梦数据库 - DM7 MPP集群安装配置
weixin_34399060的博客
06-30 2409
武汉达梦数据库作为国产数据库较有代表性的企业，在数据库研发方面投入了大量的精力，其自主研发的达梦数据库DM7，除了具有单机版可与Oracle相媲美的能力外，同时也研发了一款无共享MPP架构的数据库软件，主要面向在线分析（OLAP）领域。 下面的分享主要参考和使用达梦公司官网提供的下载包及安装文档，感兴趣的同学请自行下载。下载链接：http://www....
redis能正常访问，但是springboot编译报错
生而为人我很抱歉
08-27 736
因为你在自定义的 @Configuration 类中没有明确指定配置属性的绑定，或者这个类的加载顺序影响了 Spring Boot 的属性绑定过程。你可以尝试在 MyConf 类上加上 @Order 注解来调整加载顺序，或者确保 MyConf 类不会干扰到 Redis 配置的加载。你可以在 MyConf 类上使用 @ConditionalOnProperty 注解，确保在特定条件下才加载这个配置类，以避免在 Redis 配置加载之前进行不必要的初始化。
Redis基础命令和事务，redis持久化和主从复制
最新发布
baomingshu的博客
08-31 1369
nosql数据库介绍：解释为 non-relational(非关系型数据库)。在NoSQL 数据库中数据之间是无联系的数据的结构是松散的，可变的。优势：大数据量，高性能，灵活的数据模型，高可用，低成本劣势：（1）无关系，数据之间是无联系的。
python12 中，No module named‘distutils‘错误
热门推荐
qq_43557600的博客
08-27 1万+
python12 “ No module named'distutils' ”,​ 安装 pip install setuptools ，解决 ​
数据库管理-第236期 数据库一体机的价值（20240829）
yhw1809的博客
08-29 1565
数据库一体机是硬件、操作系统和数据库之间的融合，利用更少的硬件实现小体积的高性能密度。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值