MPP主备集群-搭建步骤

最新推荐文章于 2024-02-27 16:08:21 发布
最新推荐文章于 2024-02-27 16:08:21 发布
阅读量643 收藏
点赞数
分类专栏： DM8 文章标签： sql 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yudazzle/article/details/108076260
版权

一、 MPP节点信息

1.准备两台机器
2.准备四个数据库库
分别为EP01，EP02，EP11，EP22。MPP集群共两个节点（EP01和EP02），两个节点的备机关系为交叉主备。

数据库名称位置路径
EP01第一个节点机器一/home/dmdba/dmdbms/data/DAMENG
EP02第二个节点机器二/home/dmdba/dmdbms/data/DAMENG
EP11第一个节点的备机机器二/home/dmdba/dmdbms/data/EP11
EP22第二个节点的备机机器一/home/dmdba/dmdbms/data/EP22

3.分别前台启停数据库一次，确保数据库正常。

./dmserver /home/XXXXX(路径）/dm.ini

4.主库脱机备份到备库还原
（1）主库EP01使用dmrman脱机还原

./dmrman ctlstmt="backup database '/home/dmdba/dmdbms/data/DAMENG/dm.ini' full to backup_file1 backupset '/home/dmdba/dmdbms/data/DAMENG/BACKUP_FILE_01'"

（2）发送备份文件到EP01的备机EP11

scp -r BACKUP_FILE_01/ dmdba@192.168.106.129:/home/dmdba/dmdbms/data/EP11

（3）在备机EP11还原、恢复、更新DB_MAGIC

还原：./dmrman CTLSTMT="RESTORE DATABASE '/home/dmdba/dmdbms/data/EP11/dm.ini' FROM BACKUPSET '/home/dmdba/dmdbms/data/EP11/BACKUP_FILE_01'"
	
恢复：./dmrman CTLSTMT="RECOVER DATABASE '/home/dmdba/dmdbms/data/EP11/dm.ini' FROM BACKUPSET '/home/dmdba/dmdbms/data/EP11/BACKUP_FILE_01'"

更新DB_MAGIC：./dmrman CTLSTMT="RECOVER DATABASE'/home/dmdba/dmdbms/data/EP11/dm.ini' UPDATE DB_MAGIC"

同样需要将第二个节点EP02脱机备份，然后发送备份文件到备机EP22进行脱机还原更新和恢复。

二、配置节点

1. 配置第一个节点主机（EP01）

1.编写dm.ini
修改相应参数的值

INSTANCE_NAME=EP01
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态/OGUID
ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间
MAL_INI = 1 #打开 MAL 系统
ARCH_INI = 1 #打开归档配置
MPP_INI = 1 #启用 MPP 配置

2.编写dmmal.ini

MAL_CHECK_INTERVAL = 5 #MAL 链路检测时间间隔
MAL_CONN_FAIL_INTERVAL = 5# 判定 MAL 链路断开的时间
[MAL_INST1]
 MAL_INST_NAME = EP01 #实例名，和 dm.ini 中的 INSTANCE_NAME 一致
 MAL_HOST = 192.168.106.128 #MAL 系统监听 TCP 连接的 IP 地址
 MAL_PORT = 5337 #MAL 系统监听 TCP 连接的端口
 MAL_INST_HOST = 192.168.106.128 #实例的对外服务 IP 地址
 MAL_INST_PORT = 5236 #实例的对外服务端口，和 dm.ini 中的 PORT_NUM 一致
 MAL_DW_PORT = 5253 #实例对应的守护进程监听 TCP 连接的端口
 MAL_INST_DW_PORT = 5243 #实例监听守护进程 TCP 连接的端口
[MAL_INST2]
 MAL_INST_NAME = EP02
 MAL_HOST = 192.168.106.129
 MAL_PORT = 5337
 MAL_INST_HOST = 192.168.106.129
 MAL_INST_PORT = 5236
 MAL_DW_PORT = 5253
MAL_INST_DW_PORT = 5243
[MAL_INST3]
 MAL_INST_NAME =EP11
 MAL_HOST = 192.168.106.129
 MAL_PORT = 5338
 MAL_INST_HOST = 192.168.106.129
 MAL_INST_PORT = 5238
 MAL_DW_PORT = 5254
MAL_INST_DW_PORT = 5244
[MAL_INST4]
MAL_INST_NAME = EP22
 MAL_HOST = 192.168.106.128
 MAL_PORT = 5338
 MAL_INST_HOST = 192.168.106.128
 MAL_INST_PORT = 5238
 MAL_DW_PORT = 5254

3.编写dmarch.ini
此处注意，EP01的备机是EP11，所以归档目标实例应该是EP11。

[ARCHIVE_REALTIME1]
ARCH_TYPE = REALTIME #实时归档类型
ARCH_DEST = EP11 #实时归档目标实例名
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL #本地归档类型
ARCH_DEST = /home/dmdba/dmdbms/data/DAMENG/arch #本地归档文件存放路径
ARCH_FILE_SIZE = 128 #单位 Mb，本地单个归档文件最大值
ARCH_SPACE_LIMIT = 1024 #单位 Mb，0 表示无限制，范围1024~4294967294M

4.编写dmmpp.ini

[service_name1]
mpp_seq_no = 0
mpp_inst_name  = EP01
[service_name2]
mpp_seq_no = 1
mpp_inst_name  = EP02

5.转换dmmpp.ini为dmmpp.ctl

./dmctlcvt TYPE=2 SRC=/home/dmdba/dmdbms/data/DAMENG/dmmpp.ini DEST=/home/dmdba/dmdbms/data/DAMENG/dmmpp.ctl

2.配置第二个节点主机（EP02）

1.配置dm.ini
同上一个节点类似，只是将INSTANCE_NAME设置为EP02
2.配置dmmal.ini
同第一个节点EP01一模一样，可以直接拷贝过来。
3.配置dmarch.ini
归档目标实例是自己的备机EP22。

[ARCHIVE_REALTIME]
ARCH_TYPE =REALTIME #即时归档类型
ARCH_DEST = EP22 #实时归档目标实例名
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL #本地归档类型
ARCH_DEST =/home/dmdba/dmdbms/data/DAMENG/arch #本地归档文件存放路径
ARCH_FILE_SIZE = 128 #单位 Mb，本地单个归档文件最大值
ARCH_SPACE_LIMIT =2048 #单位 Mb，0 表示无限制，范围 1024~4294967294M

4.配置dmmpp.ctl
将第一个节点EP01的dmmpp.ctl拷贝过来。

3. 配置第一个节点的备机（EP11，在第二台机器上

1.配置dm.ini
同上，修改INSTANCE_NAME=EP11
2.配置dmmal.ini
四个数据库的dmmal.ini一模一样。
3.配置dmarch.ini
归档目标实例是自己的主库EP01。

[ARCHIVE_REALTIME1]
ARCH_TYPE = REALTIME
ARCH_DEST = EP01 #实时归档目标实例名
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL #本地归档类型
ARCH_DEST = /home/dmdba/dmdbms/data/EP11/arch #本地归档文件存放路径
ARCH_FILE_SIZE = 128  #单位 Mb，本地单个归档文件最大值
ARCH_SPACE_LIMIT  =2048 #单位 Mb，0 表示无限制，范围 1024~4294967294Mi

4.配置dmmpp.ctl
将第一个节点EP01的dmmpp.ctl拷贝过来。

4.配置第二个节点的备机（EP22，在第一台机器上）

1.配置dm.ini
同上，INSTANCE_NAME=EP22。
2.配置dmmal.ini
四个数据库的dmmal.ini一模一样。
3.配置dmarch.ini
归档目标实例是自己的主库EP02。

[ARCHIVE_REALTIME1]
ARCH_TYPE = REALTIME
ARCH_DEST =EP02 #实时归档目标实例名
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL #本地归档类型
ARCH_DEST = /home/dmdba/dmdbms/data/EP22/arch #本地归档文件存放路径
ARCH_FILE_SIZE = 128  #单位 Mb，本地单个归档文件最大值
ARCH_SPACE_LIMIT  =2048 #单位 Mb，0 表示无限制，范围 1024~4294967294M

4.配置dmmpp.ctl
将第一个节点EP01的dmmpp.ctl拷贝过来。

5.将四个数据库都mount 起来，设置oguid和数据库模式

1.在两台机器的数据库的安装目录下分别将四个数据库都mount起来。

./dmserver /home/dmdba/dmdbms/data/DAMENG/dm.ini mount
........

2.进入disql设置oguid,和数据库模式
（1）设置第一个节点EP01
进入disql。

./disql SYSDBA/SYSDBA@localhost:5236

设置oguid为45333。

SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL>sp_set_oguid(45333);
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

修改EP01为主库模式。

SQL>alter database primary;

（2）设置第二个节点EP02
进入disql。

./disql SYSDBA/SYSDBA@localhost:5236

设置oguid为45332。

SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL>sp_set_oguid(45332);
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

修改数据库模式为主库。

SQL>alter database primary;

（3）设置第一个节点的备机EP11。
登录disql。

./disql SYSDBA/SYSDBA*LOCAL@localhost:5238

设置oguid为453333,与其主库的oguid相同。

SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL>sp_set_oguid(45333);
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

修改数据库模式为备库。

SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL>ALTER DATABASE STANDBY;
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

（4）设置第二个节点的备机EP22。

./disql SYSDBA/SYSDBA*LOCAL@localhost:5238

设置oguid为45332，与自己的主库设置相同。

SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL>sp_set_oguid(45332);
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

修改数据库模式

SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL>ALTER DATABASE STANDBY;
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

6.编写守护进程

一般来说，每个单独的实例都是使用一个单独的守护进程守护。本例中，由于同一台机器上有不同组的两个实例，我们可以只配置一个守护进程，同时守护两个实例。
1.第一个节点（第一台机器上）
vi dmwatcher.ini

[GRP1]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10  #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10  #本地实例故障认定时间
INST_OGUID = 45333#守护系统唯一 OGUID 值
INST_INI = /home/dmdba/dmdbms/data/DAMENG/dm.ini #dm.ini 配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /home/dmdba/dmdbms/bin/dmserver  #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阈值，默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阈值，默认关闭
[GRP2]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10  #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10  #本地实例故障认定时间
INST_OGUID = 45332 #守护系统唯一 OGUID 值
INST_INI = /home/dmdba/dmdbms/data/EP22/dm.ini #dm.ini 配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /home/dmdba/dmdbms/bin/dmserver #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阈值，默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阈值，默认关闭

2.编写第二个守护进程（第二台机器上）
此处一定注意路径和组不要配置错误了，GRP1是EP01和EP11，GRP2是EP02和EP22。

[GRP1]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10  #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10  #本地实例故障认定时间
INST_OGUID = 45333#守护系统唯一 OGUID 值
INST_INI = /home/dmdba/dmdbms/data/EP11/dm.ini #dm.ini 配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /home/dmdba/dmdbms/bin/dmserver  #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阈值，默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阈值，默认关闭
[GRP2]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10  #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10  #本地实例故障认定时间
INST_OGUID = 45332 #守护系统唯一 OGUID 值
INST_INI = /home/dmdba/dmdbms/data/DAMENG/dm.ini #dm.ini 配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /home/dmdba/dmdbms/bin/dmserver #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阈值，默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阈值，默认关闭

7.配置监视器（第二台机器上）

dmmonitor.ini 配置确认监视器，其中 MON_DW_IP 中的 IP 和 PORT 和dmmal.ini 中的 MAL_HOST 和 MAL_DW_PORT 配置项保持一致。
监视器此处配置在第二个节点DAMENG（EP02）上面。
此处同样需要注意GRP1和GRP2不要写错了。

MON_DW_CONFIRM = 1 #确认监视器模式
MON_LOG_PATH =/home/dmdba/dmdbms/data/log #监视器日志文件存放路径
MON_LOG_INTERVAL = 60 #每隔 60s 定时记录系统信息到日志文件
MON_LOG_FILE_SIZE = 32 #每个日志文件最大 32M
MON_LOG_SPACE_LIMIT = 2048 #不限定日志文件总占用空间
[GRP1]
MON_INST_OGUID = 45333 #组 GRP1 的唯一 OGUID 值
#以下配置为监视器到组 GRP1 的守护进程的连接信息，以―IP:PORT‖的形式配置
#IP 对应 dmmal.ini 中的 MAL_HOST，PORT 对应 dmmal.ini 中的 MAL_DW_PORT
MON_DW_IP = 192.168.106.128:5253
MON_DW_IP = 192.168.106.129:5254
[GRP2]
MON_INST_OGUID = 45332 #组 GRP2 的唯一 OGUID 值
#以下配置为监视器到组 GRP2 的守护进程的连接信息，以―IP:PORT‖的形式配置
#IP 对应 dmmal.ini 中的 MAL_HOST，PORT 对应 dmmal.ini 中的 MAL_DW_PORT
MON_DW_IP = 192.168.106.129:5253
MON_DW_IP = 192.168.106.128:5254

8.启动守护进程

./dmwatcher /home/dmdba/dmdbms/data/DAMENG/dmwatcher.ini
./dmwatcher /home/dmdba/dmdbms/data/DAMENG/dmwatcher.ini

9.启动监视器

./dmmonitor /home/dmdba/dmdbms/data/DAMENG/dmmonitor.ini

在这里插入图片描述

yuDazzle
关注
专栏目录
MPP主备，DSC集群
LXRLLL134的博客
10-17 284
MPP主备，DSC集群
达梦MPP主备集群详细搭建过程
weixin_39053024的博客
10-09 900
前言 基于主备的MPP集群在运行过程中，主机对外提供服务，备机则保持主备之间的数据同步，当主机出现故障时，备机替换主机，继续对外提供服务，保证系统的不中断和可靠性。本文以DM7的主备MPP搭建为例，首先呈现MPP主备集群示意图如下： 配置了相同OGUID的两个或多个守护进程，构成一个守护进程组。为方便管理，对每个守护进程组进行命名，守护进程组中的所有守护进程和监视器，必须配置相同的组名。 软件版本：centos7 达梦MPP主备集群搭建 (V7.6.0.184-Build(2019.08.08-11076
达梦数据库配置mmp流程手册
qq_44821411的博客
02-20 705
配置mmp流程手册 一、数据库准备 机器 Ip 状态 A 192.168.127.128 192.168.127.132 主库 GRP1_MPP_EP01 备库 GRP2_MPP_EP22 B 192.168.127.130 192.168.127.131 主库 GRP2_MPP_EP02 备库 GRP1_MPP_EP11 C A机器初始化 ./dminit path=/home/dmdba/dmdbms/data/EP01 B机器初始化 ./dminit path=/home/dmdba/dmd
DMMPP主备集群搭建
weixin_48588449的博客
08-21 340
MPP主备：采用交叉互备的方式 MPP主备搭建的时候一定要理清思路，先做什么后做什么做好先做个思路图，避免误操作，从新搭建； 第一步：环境准备： 两个环境分别添加一块网卡，一个做MAL系统监听TCP连接的IP地址、一个做实例的对外服务IP地址 两个环境分别初始化两个数据库： /dm8/data/EP01 ; /dm8/data/EP22 ; /dm8/data/EP02 ; /dm8/data/EP11 集群相当与两套主备、两个组 GRP1（GRP1_MPP_EP01、GRP1_MPP_EP11） GRP2
mpp集群搭建
zhdong00的博客
01-26 1044
mpp集群 MPP（DM Massively Parallel Processing）大规模并行处理，是一种无全对等不共享的数据库架构实现，数据根据用户指定的分布规则分布在不同的节点上，各节点只负责自身数据的读写。没有实际上的主从之分，每个节点既可以说是主节点也可以说是从节点。客户端可以连到任意一个节点进行操作，对于会话连接到的节点称为主节点。其它节点为从节点。 主节点接受sql请求，生成执行计划，分发给各个从节点，各从节点执行收到的指令，并回传结果给主节点，主节点汇总后，返回给客户端。 MPP最大支
MPP集群的搭建
weixin_44219201的博客
10-06 797
搭建MPP集群以及进行动态扩容
MPP集群基本概念和搭建
m0_72231829的博客
11-11 335
为了支持海量数据存储和处理，高并发处理，高可用性等需求，提供高端数据仓库解决方案，DM提供了大规模并行处理MPP架构。
达梦MPP集群的搭建
qq_42292206的博客
08-19 335
MPP主备集群搭建 1.2台虚拟机，创建4个实例库，来进行交叉主备 一、在MPP01配置主库EP01： 1.配置dm.ini #不允许手工方式修改实例模式/状态/OGUID #不允许备库 OFFLINE 表空间 #启动各种配置 2.配置dmmal.ini 3.配置dmarch.ini 4.配置dmmpp.ini和dmmpp.ctl 先vim配置ini文件，然后再转换为ctl文件 5.配置EP01的OGUID值 6.修改数据库模式 二、在MMP2上配置主机EP02 基本步骤跟配置EP01一
greenplum集群搭建操作步骤（CentOS7.5）
03-21
### Greenplum 集群搭建操作步骤详解 #### 一、概述 本文档详细介绍了在 CentOS 7.5 环境下搭建 Greenplum 数据库集群的具体步骤。Greenplum 是一款高性能的企业级 MPP（大规模并行处理）数据库系统，特别适合于大...
DM实时主备搭建
qq_36436792的博客
07-17 561
机器准备和规划 IP 机器名 实例名 主库机器： 192.168.43.131 192.168.43.134（内网） DW_P 配置2块网卡 GRP1_RT_01 备库机器： 192.168.43.132 192.168.43.135（内网） DW_S1...
MPP主备集群搭建
lxm13613538669的博客
07-11 492
达梦数据库MPP集群部署
MPP集群搭建
瞬步
08-09 305
1.原理 2.环境配置 实例名EP01 10.0.0.11：5236 172.16.1.12：5269 MPP_SEQNO：0 实例名EP02 10.0.0.21：5236 172.16.1.22：5270 MPP_SEQNO：1 注意：DM MPP 各 EP 使用的 DM 服务器版本应一致，同时还应注意各 EP 所在主机的操作系统位数、大小端模式、时区及时间设置都应一致，否则可能造成意想不到的错误 3.搭建过程 初始化实例 [dmdba@ep01 ~/dmdbms/bin]$ ./dminit path
DM MPP集群搭建
weixin_49109748的博客
08-21 443
MPP集群搭建步骤 1、 利用dminit初始化四个实例库，两台虚拟机各新建两个实例； 2、 启停一次新初始化的库(两个机器都进行该操作)； 3、 更改四个实例的dm_ini文件(例如实例为：GRP1_MPP_EP01，其他三个实例都可以根据这个来改，只是instance_name不一样，其他的参数都一样)； vi /home/dmdba/dmdbms/data/DAMENG/dm.ini 4、 对主机EP01进行备份(脱机备份); 5、 将EP01上备份的文件发送至另外一台机器上的备机(实例名为
4节点MPP主备集群部署、管理及备份还原
weixin_38256546的博客
11-17 575
快速搭建达梦MPP集群
DM8-搭建MPP集群
weixin_42447367的博客
08-31 229
搭建MPP集群 部署2节点主备MPP 节点 IP 端口 实例 1 192.168.152.133 5238 EP_1 2 192.168.152.134 5238 EP_2 主机： 新初始化一个实例 ./dminit path=/home/dmdba/dmdbms/data page_size=16 port_num=5238 DB_NAME=EP_1 INSTANCE_NAME=EP_1 注册服务 ./dm_service_installer.sh -t dmserver -p EP_1 -dm_ini
达梦MPP主备集群搭建
qq_37898570的博客
06-30 670
达梦MPP主备集群搭建 1、环境规划 1.1 系统规划 1.2 主库端口规划 1.3 备库端口规划 1.4 守护进程规划 2、数据库准备过程 2.1 数据库初始化 1）A机器上初始化库 /dm/data/EP01（主） /dm/data/EP02（备） 2）B机器上初始化库 /dm/data/EP01（备） /dm/data/EP02（主） A机器和B机器交叉互为主备 A机器EP01(主)对应B机器EP01(备) B机器EP02(主)对应A机器EP02(备) 2.2 配置归档 2.2.1 配置 dm
达梦数据库-有主备MPP集群搭建
最新发布
小杨童鞋学习日记
02-27 926
达梦数据库-有主备MPP集群搭建
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值