配置DM数据库MPP守护集群

最新推荐文章于 2024-05-12 11:47:16 发布
最新推荐文章于 2024-05-12 11:47:16 发布
阅读量116 收藏
点赞数
文章标签： 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_38256546/article/details/109386492
版权

MPP系统规划
在这里插入图片描述

守护进程规划
在这里插入图片描述
卸载原有数据库
在这里插入图片描述

Root用户下执行脚本完成卸载/home/dmdba/dmdbms/root_uninstaller.sh

重新安装数据库
在这里插入图片描述
Root用户下执行脚本 /home/dmdba/dmdbms/script/root/root_installer.sh

初始化数据库EP01
在这里插入图片描述
初始化数据库EP22
在这里插入图片描述初始化数据库EP02
在这里插入图片描述

初始化数据库EP11
在这里插入图片描述
四个数据库分别启停一次
./dmserver …/data/EP01/DAMENG/dm.ini
./dmserver …/data/EP22/DAMENG/dm.ini
./dmserver …/data/EP02/DAMENG/dm.ini
./dmserver …/data/EP11/DAMENG/dm.ini

备份EP01数据库
./dmrman ctlstmt=“backup database ‘/home/dmdba/dmdbms/data/EP01/DAMENG/dm.ini’ full to backupset_file1 backupset ‘/home/dmdba/dmdbms/data/EP01/DAMENG/backupset_file_01’” 拷贝备份文件到EP11
scp -r backupset_file_01/ 172.16.10.181:/home/dmdba/dmdbms/data/EP11

还原备份到EP11
./dmrman ctlstmt=“restore database ‘/home/dmdba/dmdbms/data/EP11/DAMENG/dm.ini’ from backupset ‘/home/dmdba/dmdbms/data/EP11/backupset_file_01’”

./dmrman ctlstmt=“recover database ‘/home/dmdba/dmdbms/data/EP11/DAMENG/dm.ini’ from backupset ‘/home/dmdba/dmdbms/data/EP11/backupset_file_01’”

./dmrman ctlstmt=“recover database ‘/home/dmdba/dmdbms/data/EP11/DAMENG/dm.ini’ update db_magic”

备份EP02数据库
./dmrman ctlstmt=“backup database ‘/home/dmdba/dmdbms/data/EP02/DAMENG/dm.ini’ full to backupset_file2 backupset ‘/home/dmdba/dmdbms/data/EP02/backupset_file_02’”

拷贝备份到EP22
scp -r backupset_file_02/ 172.16.10.110:/home/dmdba/dmdbms/data/EP22/

还原备份到EP22
./dmrman ctlstmt=“restore database ‘/home/dmdba/dmdbms/data/EP22/DAMENG/dm.ini’ from backupset ‘/home/dmdba/dmdbms/data/EP22/backupset_file_02’”

./dmrman ctlstmt=“recover database ‘/home/dmdba/dmdbms/data/EP22/DAMENG/dm.ini’ from backupset ‘/home/dmdba/dmdbms/data/EP22/backupset_file_02’”

./dmrman ctlstmt=“recover database ‘/home/dmdba/dmdbms/data/EP22/DAMENG/dm.ini’ update db_magic”

配置EP01

修改 EP01 的 dm.ini 的以下几个参数如下：

INSTANCE_NAME = EP01
PORT_NUM = 5236
MAL_INI = 1
MAL_INI = 1 #打开 MAL 系统
MPP_INI = 1
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态/OGUID
ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间MAL_INI = 1 #打开 MAL 系统

配置dmmal.ini参数
MAL_CHECK_INTERVAL = 5
MAL_CONN_FAIL_INTERVAL = 5
[MAL_INST1]
MAL_INST_NAME = EP01
MAL_HOST = 172.16.10.110
MAL_PORT = 5269
MAL_INST_HOST = 172.16.10.110
MAL_INST_PORT = 5236
MAL_DW_PORT = 5253
MAL_INST_DW_PORT = 5240
[MAL_INST2]
MAL_INST_NAME = EP02
MAL_HOST = 172.16.10.181
MAL_PORT = 5270
MAL_INST_HOST = 172.16.10.181
MAL_INST_PORT = 5237
MAL_DW_PORT = 5254
MAL_INST_DW_PORT = 5241
[MAL_INST3]
MAL_INST_NAME = EP11
MAL_HOST = 172.16.10.181
MAL_PORT = 5369
MAL_INST_HOST = 172.16.10.181
MAL_INST_PORT = 5238
MAL_DW_PORT = 5353
MAL_INST_DW_PORT = 5242
[MAL_INST4]
MAL_INST_NAME = EP22
MAL_HOST = 172.16.10.110
MAL_PORT = 5370
MAL_INST_HOST = 172.16.10.110
MAL_INST_PORT = 5239
MAL_DW_PORT = 5354
MAL_INST_DW_PORT = 5243

配置dmarch.ini参数
[ARCHIVE_REALTIME1]
ARCH_TYPE = REALTIME
ARCH_DEST = EP11
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL
ARCH_DEST = /home/dmdba/dmdbms/data/EP01/DAMENG/arch
ARCH_FILE_SIZE = 128
ARCH_SPACE_LIMIT = 1024

配置dmmpp.ini参数
Vi dmmpp.ini
[service_name1]
mpp_seq_no = 0
mpp_inst_name = EP01
[service_name2]
mpp_seq_no = 1
mpp_inst_name = EP02

使用dmctlcvt工具生成控制文件
./dmctlcvt TYPE=2 SRC=/home/dmdba/dmdbms/data/EP01/DAMENG/dmmpp.ini DEST=/home/dmdba/dmdbms/data/EP01/DAMENG/dmmpp.ctl

Mount方式启动
./dmserver …/data/EP01/DAMENG/dm.ini mount

配置EP02

修改 EP02 的 dm.ini 的以下几个参数如下：
INSTANCE_NAME = EP02
PORT_NUM = 5237
MAL_INI = 1
MPP_INI = 1
ARCH_INI = 1
ENABLE_OFFLINE_TS = 2

拷贝EP01dmmal参数到EP02

scp dmmal.ini 172.16.10.181:/home/dmdba/dmdbms/data/EP02/DAMENG/

配置dmarch.ini参数
[ARCHIVE_REALTIME1]
ARCH_TYPE = REALTIME
ARCH_DEST = EP02
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL
ARCH_DEST = /home/dmdba/dmdbms/data/EP02/DAMENG/arch
ARCH_FILE_SIZE = 128
ARCH_SPACE_LIMIT = 0

拷贝EP01上dmmpp.ctl文件到EP02
scp dmmpp.ctl 172.16.10.181:/home/dmdba/dmdbms/data/EP02/DAMENG/

Mount启动
./dmserver …/data/EP02/DAMENG/dm.ini mount

EP01登录disql

[dmdba@localhost bin]$ ./disql SYSDBA/SYSDBA:5236

服务器[LOCALHOST:5236]:处于普通配置状态登录
使用时间 : 5.337(ms)
disql V8
SQL> SP_SET_OGUID(453);
DMSQL 过程已成功完成
已用时间: 8.110(毫秒). 执行号:88072.
SQL> alter database primary;
操作已执行
已用时间: 2.033(毫秒). 执行号:0.
SQL> sp_set_para_value(1,‘ALTER_MODE_STATUS’,0);
DMSQL 过程已成功完成
已用时间: 14.193(毫秒). 执行号:88073.

EP02登录DISQL，执行以下命令

[dmdba@localhost bin]$ ./disql SYSDBA/SYSDBA:5237
SQL> sp_set_oguid(454);
SQL> alter database primary;
SQL> sp_set_para_value(1,‘ALTER_MODE_STATUS’,0);

配置EP11

配置备库EP11上dm.ini参数

INSTANCE_NAME = EP11
PORT_NUM = 5238
DW_INACTIVE_INTERVAL = 60
ENABLE_OFFLINE_TS = 2
MAL_INI = 1
ARCH_INI = 1
MPP_INI = 1
RLOG_SEND_APPLY_MON = 64

拷贝EP01上dmmal.ini到EP11
scp dmmal.ini 172.16.10.181:/home/dmdba/dmdbms/data/EP11/DAMENG/

配置dmarch.ini参数
[ARCHIVE_REALTIME1]
ARCH_TYPE = REALTIME
ARCH_DEST = EP01
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL
ARCH_DEST = /home/dmdba/dmdbms/data/EP11/DAMENG/arch
ARCH_FILE_SIZE = 128
ARCH_SPACE_LIMIT = 0

拷贝EP01上dmmpp.ini
scp dmmpp.ctl 172.16.10.181:/home/dmdba/dmdbms/data/EP11/DAMENG/

Mount 启动数据库
./dmserver …/data/EP11/DAMENG/dm.ini mount

EP11登录disql执行以下命令
[dmdba@localhost bin]$ ./disql SYSDBA/SYSDBA:5238

SQL> sp_set_oguid(453);
SQL> alter database standby;
SQL> sp_set_para_value(1,‘ALTER_MODE_STATUS’,0);

配置EP22

配置EP22上dm.ini

INSTANCE_NAME = EP22
PORT_NUM = 5239
DW_INACTIVE_INTERVAL = 60
ENABLE_OFFLINE_TS = 2
MAL_INI = 1
ARCH_INI = 1
MPP_INI = 1
RLOG_SEND_APPLY_MON = 64

配置dmarch.ini
[ARCHIVE_REALTIME1]
ARCH_TYPE = REALTIME
ARCH_DEST = EP02
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL
ARCH_DEST = /home/dmdba/dmdbms/data/EP22/DAMENG/arch
ARCH_FILE_SIZE = 128
ARCH_SPACE_LIMIT = 0

拷贝dmmal.ini和dmmpp.ini参数文件
cp dmmal.ini /home/dmdba/dmdbms/data/EP22/DAMENG/

cp dmmpp.ctl /home/dmdba/dmdbms/data/EP22/DAMENG

Mount启动./dmserver …/data/EP22/DAMENG/dm.ini mount

修改OGUID
[dmdba@localhost bin]$ ./disql SYSDBA/SYSDBA:5239
SQL> SP_SET_OGUID(454);
SQL> alter database standby;
SQL> sp_set_para_value(1,‘ALTER_MODE_STATUS’,0);

配置EP01 EP22守护进程
Vi dmwatcher.ini

[GRP1]
DW_TYPE = GLOBAL
DW_MODE = AUTO
DW_ERROR_TIME = 10
INST_RECOVER_TIME = 60
INST_ERROR_TIME = 10
INST_OGUID = 453
INST_INI = /home/dmdba/dmdbms/data/EP01/DAMENG/dm.ini
INST_AUTO_RESTART = 1
INST_STARTUP_CMD = /home/dmdba/dmdbms/bin/dmserver
RLOG_SEND_THRESHOLD = 0
RLOG_APPLY_THRESHOLD = 0

[GRP2]
DW_TYPE = GLOBAL
DW_MODE = AUTO
DW_ERROR_TIME = 10
INST_RECOVER_TIME = 60
INST_ERROR_TIME = 10
INST_OGUID = 454
INST_INI = /home/dmdba/dmdbms/data/EP22/DAMENG/dm.ini
INST_AUTO_RESTART = 1
INST_STARTUP_CMD = /home/dmdba/dmdbms/bin/dmserver
RLOG_SEND_THRESHOLD = 0
RLOG_APPLY_THRESHOLD = 0

同样配置守护进程在另一台服务器

[GRP1]
DW_TYPE = GLOBAL
DW_MODE = AUTO
DW_ERROR_TIME = 10
INST_RECOVER_TIME = 60
INST_ERROR_TIME = 10
INST_OGUID = 453
INST_INI = /home/dmdba/dmdbms/data/EP11/DAMENG/dm.ini
INST_AUTO_RESTART = 1
INST_STARTUP_CMD = /home/dmdba/dmdbms/bin/dmserver
RLOG_SEND_THRESHOLD = 0
RLOG_APPLY_THRESHOLD = 0

[GRP2]
DW_TYPE = GLOBAL
DW_MODE = AUTO
DW_ERROR_TIME = 10
INST_RECOVER_TIME = 60
INST_ERR0R_TIME = 10
INST_OGUID = 454
INST_INI = /home/dmdba/dmdbms/data/EP02/DAMENG/dm.ini
INST_AUTO_RESTART = 1
INST_STARTUP_CMD = /home/dmdba/dmdbms/bin/dmserver
RLOG_SEND_THRESHOLD = 0
RLOG_APPLY_THRESHOLD = 0

配置确认监视器

vi dmmonitor

MON_DW_CONFIRM = 1
MON_LOG_PATH = /home/dmdba/dmdbms/log
MON_LOG_INTERVAL = 60
MON_LOG_FILE_SIZE = 32
MON_LOG_SPACE_LIMIT = 0
[GRP1]
MON_INST_OGUID = 453
MON_DW_IP = 172.16.10.110:5253
MON_DW_IP = 172.16.10.181:5353

[GRP2]
MON_INST_OGUID = 454
MON_DW_IP = 172.16.10.181:5254
MON_DW_IP = 172.16.10.110:5354

启动守护进程
./dmwatcher …/data/EP02/DAMENG/dmwatcher.ini
./dmwatcher /home/dmdba/dmdbms/data/EP01/DAMENG/dmwatcher.ini

启动监视器
./dmmonitor …/data/dmmonitor.ini

监视器进程已经成功监控数据库在这里插入图片描述
更多资讯请上达梦技术社区了解： https://eco.dameng.com

wqy-dameng
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
百万数据sum太慢_MPP数据库简介
weixin_39746552的博客
11-15 598
1、先了解下OLTP与OLAP区别OLTP(OnLine Transaction Processing ，联机事务处理)系统例如mysql。擅长事务处理，在数据操作中保持着很强的一致性和原子性 ，能够很好的支持频繁的数据插入和修改 ，但是，一旦数据量过大，OLTP便力不从心了。 OLAP(On-Line Analytical Processing，联机分析处理)系统例如Greenplum。不特别关...
数据仓库的MPP架构
延宝小白马的博客
07-25 2790
举个例子，Teradata就是基于MPP技术的一个关系数据库软件（这是最早采用MPP架构的数据库），基于此数据库来开发应用时，不管后台服务器由多少节点组成，开发人员面对的都是同一个数据库系统，而无需考虑如何调度其中某几个节点的负载。MPP的系统扩展和NUMA不同，MPP是由多台SMP服务器通过一定的节点互联网络进行连接，协同工作，完成相同的任务，从用户的角度来看是一个服务器系统。但是访问的速度是不一样的，因为CPU访问本地内存的速度远远高于系统内其他节点的内存速度，这也是非一致存储访问NUMA的由来。
MPP基础原理
qq_37432174的博客
07-15 2927
最近忙于工作，有一段时间没更新自己的博客了，也就意味着囤积了一波需要梳理总结并记录的知识点，但可以保证的是所有都是零星的知识点，不会涉及工作内容。MPP (Massively Parallel Processing)，即大规模并行处理。
StarRocks 【新一代MPP数据库】
最新发布
梦想是动物管理员
05-12 1405
StarRocks 基本使用
谈谈mysql和redis的区别
Nyitong的博客
09-24 838
mysql和redis都是数据库，这两者有什么区别呢？ 1.类型上 从类型上来说，mysql是关系型数据库，redis是缓存数据库。 2.作用上 mysql用于持久化的存储数据到硬盘，功能强大，但是速度较慢。 redis用于存储使用较为频繁的数据到缓存中，读取速度快，能够大大的提高运行效率，但是保存时间有限。 3.需求上 mysql和redis因为需求的不同，一般都是配合使用。 描述的具体一点： mysql作为持久化存储的关系型数据库，相对薄弱的地方在于每次请求访问数据库时，都存在着I/O操作，如果反复频繁
分析型数据库：MPP 数据库的概念、技术架构与未来发展方向
Transwarp
04-14 1623
分析型数据库是数据库的一个分支，主要设计目标是存储、管理和分析数据，一般存储的数据类型多，时间维度长，主要配合企业的业务分析、商业智能等应用场景，驱动数据化的商业决策。由于数据分析一般涉及的数据量大，计算复杂，分析型数据库一般都是采用大规模并行计算或者分布式计算来提升它的数据处理能力。行业内从1984年开始推出基于多个关系数据库（Postgres为主）组成的MPP数据库方式来提升计算能力，代表性的产品有Teradata、Netezza、Vertica等。
MPP集群搭建步骤.docx
10-25
dm8 达梦8 mpp集群搭建测试，适合学习达梦达梦数据库人群
数据库GreenPlum-集群环境配置与搭建.docx
10-03
【GreenPlum数据库集群环境配置与搭建】 GreenPlum是一个基于MPP（Massively Parallel Processing）架构的关系型数据库管理系统，由多个独立的数据库服务组成，提供高性能的数据处理能力。相较于传统的RAC（Real ...
MPP数据库对比.doc
06-16
主流分布式并行处理数据库产品介绍 1 Greenplum 1 基础架构 Greenplum是基于Hadoop的一款分布式数据库产品，在处理海量数据方面相比传统数 据库有着较大的优势。 Greenplum整体架构如下图： 数据库由Master Severs...
达梦数据库DM8大规模并行处理MPP.pdf
10-14
DM8 MPP集群的搭建涉及节点配置、网络设置、数据分布策略等步骤，需要遵循官方文档指导。在使用过程中，需要注意监控系统性能，定期进行数据维护和优化，确保系统稳定运行。 总结，达梦数据库DM8的大规模并行处理...
MPP概述
热门推荐
trocp的专栏
01-29 4万+
什么是MPP MPP (Massively Parallel Processing)，即大规模并行处理，在数据库非共享集群（传统的单节点不属于集群，双机热备或Oracle RAC等，均是基于共享存储的）中，每个节点都有独立的磁盘存储系统和内存系统，业务数据根据数据库模型和应用特点划分到各个节点上，每台数据节点通过专用网络或者商业通用网络互相连接，彼此协同计算，作为整体提供数据库服务。非共享数据库...
DM MPP集群原理与配置管理
NinjaKilling的博客
09-19 528
DM MPP集群原理与配置管理
MPP数据库
weixin_30575309的博客
02-12 2240
MPP数据库 版权声明：本文为博主原创文章，转载请注明出处。 https://blog.csdn.net/lyc417356935/article/details/45033069 MPP数据库定义 MPP即大规模并行处理（Massively Parallel Processor ）。 在数据库非共享集群中，每个节点都有独立的磁盘存储系...
MPP - GreenPlum数据库安装以及简单使用
donggou7958的博客
07-05 2223
一、集群介绍 共3台主机，ip 为193.168.0.93 193.168.0.94 193.168.0.95 集群对应master和segment如下，193.168.0.93为master节点。193.168.0.94 193.168.0.95为segment节点，每个segment节点配置两个primary segment和两个mirror segment（也可以...
共享存储集群（DM DSC）搭建
qq_35104961的博客
04-11 1233
共享存储集群（DM DSC）搭建 DM DSC是一个单数据库多实例的集群系统 数据库部署在共享存储上，供所有节点访问，具有高可用性、高性能、负载均衡等特性。 DM DSC 集群可以自动处理节点故障及故障切换，不影响对外正常服务、保证系统的高可用性 ----搭建操作： ----关闭防火墙 firewalld systemctl stop firewalld systemctl disable firewalld ----验证 systemctl status firewalld ----关闭防火墙 ipta
操作 神通数据库_神通大型通用数据库
weixin_39744384的博客
12-30 8201
(一)标准SQL· 表提供创建表、修改表名称、字段名称与类型、添加/删除字段等表结构定义操作。单表数据存储量为32T以上。数据表单表最大列数大于1500列。单表数据存储量为100T以上，单表支持行数千亿行级。· 索引提供创建、修改索引信息功能。支持多种索引，包括B+树索引(唯一、非唯一)、基于B树的函数索引、全局分区索引、局部分区索引、位图索引、Hash索引。·多种数据类型提供丰富的数据类型支持，...
达梦数据库MPP主备集群（3节点）环境搭建
Nelson_S的博客
03-27 2199
达梦数据库MPP主备集群（3节点）环境搭建一、 初始化实例二、 数据准备三、 配置A机器-主库MPP1_01四、 配置B机器-主库MPP1_02五、 配置C机器-主库MPP1_03六、 配置B机器-备库MPP1_01B七、 配置C机器-备库MPP1_02B八、 配置A机器-备库MPP1_03B九、 配置监视器十、 启动数据库十一、 启动守护进程十二、 启动监视器查看各个守护进程的状态 一、 初始化实例 1.A机器 2.B机器 3.C机器 二、 数据准备 1.主库01与备库01B 1）先启动一下主库 2
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值