达梦数据库MPP集群搭建

最新推荐文章于 2024-04-27 23:31:31 发布
最新推荐文章于 2024-04-27 23:31:31 发布
阅读量147 收藏
点赞数
文章标签： big data 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_48963576/article/details/120229998
版权

主备MPP需要两套主备集群，在集群的基础上做的MPP

1、准备工作

创建数据库，并重启

主机102

dminit extent_size=32 page_size=32 CASE_SENSITIVE=1 CHARSET=1 INSTANCE_NAME=MPP_102 DB_NAME=MPP_102 PORT_NUM=5237 path=/data/dm
dminit extent_size=32 page_size=32 CASE_SENSITIVE=1 CHARSET=1 INSTANCE_NAME=MPP_103_STA DB_NAME=MPP_103_STA PORT_NUM=5217 path=/data/dm

主机103

dminit extent_size=32 page_size=32 CASE_SENSITIVE=1 CHARSET=1 INSTANCE_NAME=MPP_103 DB_NAME=MPP_103 PORT_NUM=5217 path=/data/dm
dminit extent_size=32 page_size=32 CASE_SENSITIVE=1 CHARSET=1 INSTANCE_NAME=MPP_102_STA DB_NAME=MPP_102_STA PORT_NUM=5237 path=/data/dm

主备库数据一致：

[dmdba@node3 ~]$ dmrman CTLSTMT="BACKUP DATABASE  '/data/dm/MPP_103/dm.ini'  FULL TO BACKUP_FILE1 BACKUPSET '/data/dm/bak/103'"
[dmdba@node3 ~]$scp /data/dm/bak/103/* v2:/data/dm/bak/103
[dmdba@node2 ~]$ dmrman CTLSTMT="RESTORE DATABASE '/data/dm/MPP_103_STA/dm.ini'  FROM BACKUPSET '/data/dm/bak/103'"
[dmdba@node2 ~]$ dmrman CTLSTMT="RECOVER DATABASE '/data/dm/MPP_103_STA/dm.ini'  FROM BACKUPSET '/data/dm/bak/103'"
[dmdba@node2 ~]$ dmrman CTLSTMT="RECOVER DATABASE '/data/dm/MPP_103_STA/dm.ini'  UPDATE DB_MAGIC"

2、修改参数文件

主库102

[dmdba@node2 ~]$ vim /data/dm/MPP_102/dm.ini |grep 
'INSTANCE_NAME\|PORT_NUM\|MAL_INI\|MPP_INI\|ARCH_INI'
        INSTANCE_NAME                   = MPP_102              #Instance name
        PORT_NUM                        = 5237                  #Port number on which the database server will listen
        MAL_INI                         = 1                     #dmmal.ini
        ARCH_INI                        = 1                     #dmarch.ini
        MPP_INI                         = 1                     #dmmpp.ini

备库102

[dmdba@node3 bak]$ vim /data/dm/MPP_102_STA/dm.ini |grep
'INSTANCE_NAME\|PORT_NUM\|MAL_INI\|MPP_INI\|ARCH_INI'
        INSTANCE_NAME                   = MPP_102_STA              #Instance name
        PORT_NUM                        = 5237                  #Port number on which the database server will listen
        MAL_INI                         = 1                     #dmmal.ini
        ARCH_INI                        = 1                     #dmarch.ini
        MPP_INI                         = 1                     #dmmpp.ini

主库103

[dmdba@node3 bak]$ vim /data/dm/MPP_103/dm.ini |grep 
'INSTANCE_NAME\|PORT_NUM\|MAL_INI\|MPP_INI\|ARCH_INI'
        INSTANCE_NAME                   = MPP_103              #Instance name
        PORT_NUM                        = 5217                  #Port number on which the database server will listen
        MAL_INI                         = 1                     #dmmal.ini
        ARCH_INI                        = 1                     #dmarch.ini
        MPP_INI                         = 1                     #dmmpp.ini

备库103

[dmdba@node2 ~]$ vim /data/dm/MPP_103_STA/dm.ini |grep 
'INSTANCE_NAME\|PORT_NUM\|MAL_INI\|MPP_INI\|ARCH_INI'
        INSTANCE_NAME                   = MPP_103_STA              #Instance name
        PORT_NUM                        = 5217                  #Port number on which the database server will listen
        MAL_INI                         = 1                     #dmmal.ini
        ARCH_INI                        = 1                     #dmarch.ini
        MPP_INI                         = 1                     #dmmpp.ini

3、修改归档日志

主机102

[dmdba@node2 ~]$ vim /data/dm/MPP_102/dmarch.ini
[ARCHIVE_REALTIME]
ARCH_TYPE    = REALTIME    #实时归档类型
ARCH_DEST    =MPP_102_STA    #实时归档目标实例名

[ARCHIVE_LOCAL1]
    ARCH_TYPE            = LOCAL        
    ARCH_DEST            = /data/dm/MPP_102/arch       
    ARCH_FILE_SIZE       = 128        
    ARCH_SPACE_LIMIT     = 1024
[dmdba@node2 ~]$ vim /data/dm/MPP_103_STA/dmarch.ini
[ARCHIVE_REALTIME]
ARCH_TYPE    = REALTIME    #实时归档类型
ARCH_DEST    =MPP_103    #实时归档目标实例名

[ARCHIVE_LOCAL1]
    ARCH_TYPE            = LOCAL        
    ARCH_DEST            = /data/dm/MPP_103_STA/arch        
    ARCH_FILE_SIZE       = 128        
    ARCH_SPACE_LIMIT     = 1024

主机103

[dmdba@node3 bak]$ vim /data/dm/MPP_103/dmarch.ini 
[ARCHIVE_REALTIME]
ARCH_TYPE    = REALTIME    #实时归档类型
ARCH_DEST    =MPP_103_STA    #实时归档目标实例名

[ARCHIVE_LOCAL1]
    ARCH_TYPE            = LOCAL        
    ARCH_DEST            = /data/dm/MPP_103/arch        
    ARCH_FILE_SIZE       = 128        
    ARCH_SPACE_LIMIT     = 1024 


[dmdba@node3 bak]$ vim /data/dm/MPP_102_STA/dmarch.ini 
[ARCHIVE_REALTIME]
ARCH_TYPE    = REALTIME    #实时归档类型
ARCH_DEST    =MPP_102    #实时归档目标实例名

[ARCHIVE_LOCAL1]
    ARCH_TYPE            = LOCAL        
    ARCH_DEST            = /data/dm/MPP_102_STA/arch        
    ARCH_FILE_SIZE       = 128        
    ARCH_SPACE_LIMIT     = 1024

4、修改dmmal.ini

dmmal.ini主备库一致

[dmdba@node2 ~]$ vim /data/dm/MPP_103_STA/dmmal.ini 
MAL_CHECK_INTERVAL = 5
MAL_CONN_FAIL_INTERVAL = 5
[MAL_INST1]
MAL_INST_NAME = MPP_102 
MAL_HOST = 10.12.11.102
MAL_PORT = 5235
MAL_INST_HOST = 192.168.1.102
MAL_INST_PORT = 5237
MAL_DW_PORT  = 5233 
MAL_INST_DW_PORT = 5234
[MAL_INST2]
MAL_INST_NAME = MPP_102_STA
MAL_HOST = 10.12.11.103
MAL_PORT = 5235
MAL_INST_HOST = 192.168.1.103
MAL_INST_PORT = 5237
MAL_DW_PORT  = 5233
MAL_INST_DW_PORT = 5234

[MAL_INST3]
MAL_INST_NAME = MPP_103
MAL_HOST = 10.12.11.103
MAL_PORT = 5215
MAL_INST_HOST = 192.168.1.103
MAL_INST_PORT = 5217
MAL_DW_PORT  = 5213
MAL_INST_DW_PORT = 5214
[MAL_INST4]
MAL_INST_NAME = MPP_103_STA
MAL_HOST = 10.12.11.102
MAL_PORT = 5215
MAL_INST_HOST = 192.168.1.102
MAL_INST_PORT = 5217
MAL_DW_PORT  = 5213
MAL_INST_DW_PORT = 5214

5、守护进程watcher

主机102

[dmdba@node2 ~]$ vim /data/dm/MPP_102/dmwatcher.ini 
[MPP_102] 
DW_TYPE    = GLOBAL                      
DW_MODE    = AUTO                       
DW_ERROR_TIME     = 10              
INST_RECOVER_TIME  = 60       
INST_ERROR_TIME   = 10              
INST_OGUID         = 45330         
INST_INI           = /data/dm/MPP_102/dm.ini             
INST_AUTO_RESTART  = 1                       
INST_STARTUP_CMD   = /data/dmdbms/bin/dmserver         
RLOG_SEND_THRESHOLD = 0
RLOG_APPLY_THRESHOLD = 0

[MPP_103] 
DW_TYPE    = GLOBAL                      
DW_MODE    = AUTO                       
DW_ERROR_TIME     = 10              
INST_RECOVER_TIME  = 60       
INST_ERROR_TIME   = 10              
INST_OGUID         = 45331         
INST_INI           = /data/dm/MPP_103_STA/dm.ini             
INST_AUTO_RESTART  = 1                       
INST_STARTUP_CMD   = /data/dmdbms/bin/dmserver         
RLOG_SEND_THRESHOLD = 0
RLOG_APPLY_THRESHOLD = 0

主机103

[dmdba@node3 bak]$ vim /data/dm/MPP_103/dmwatcher.ini
[MPP_103] 
DW_TYPE    = GLOBAL                      
DW_MODE    = AUTO                       
DW_ERROR_TIME     = 10              
INST_RECOVER_TIME  = 60       
INST_ERROR_TIME   = 10              
INST_OGUID         = 45331         
INST_INI           = /data/dm/MPP_103/dm.ini             
INST_AUTO_RESTART  = 1                       
INST_STARTUP_CMD   = /data/dmdbms/bin/dmserver         
RLOG_SEND_THRESHOLD = 0
RLOG_APPLY_THRESHOLD = 0

[MPP_102] 
DW_TYPE    = GLOBAL                      
DW_MODE    = AUTO                       
DW_ERROR_TIME     = 10              
INST_RECOVER_TIME  = 60       
INST_ERROR_TIME   = 10              
INST_OGUID         = 45330         
INST_INI           = /data/dm/MPP_102_STA/dm.ini             
INST_AUTO_RESTART  = 1                       
INST_STARTUP_CMD   = /data/dmdbms/bin/dmserver

6、监视器

监视器配置在第三台主机上，配置在主机103上

[dmdba@node3 bak]$ vim /data/dm/MPP_103/dmmonitor.ini 
MON_DW_CONFIRM = 0                    =====MON_DW_CONFIRM：0是普通监视器，1是确认监视器
MON_LOG_PATH = /data/dmdbms/log
MON_LOG_INTERVAL  = 60 
MON_LOG_FILE_SIZE = 32 
MON_LOG_SPACE_LIMIT = 0
[MPP_102]                                              ====与守护进程dmwatcher.ini一致
MON_INST_OGUID = 45330
MON_DW_IP = 10.12.11.102:5233
MON_DW_IP = 10.12.11.103:5233
[MPP_103]                                             ====与守护进程dmwatcher.ini一致
MON_INST_OGUID = 45331
MON_DW_IP = 10.12.11.102:5213
MON_DW_IP = 10.12.11.103:5213

7、mpp.ini配置

[dmdba@node3 bak]$ vim /data/dm/MPP_103/dmmpp.ini
[service_name1]
mpp_seq_no = 0
mpp_inst_name  = MPP_102
[service_name2]
mpp_seq_no = 1
mpp_inst_name  = MPP_103

编辑dmmpp.ini文件生成dmmpp.ctl
 

[dmdba@node3 bak]$ dmctlcvt  TYPE=2  SRC=/data/dm/MPP_103/dmmpp.ini DEST=/data/dm/MPP_103/dmmpp.ctl

复制到各主备数据库目录下

8、启动数据库

启动数据库到mount状态，启动顺序与主备集群一致

主备102

[dmdba@node2 ~]$ dmserver /data/dm/MPP_102/dm.ini mount
[dmdba@node3 ~]$ dmserver /data/dm/MPP_102_STA/dm.ini mount

主备103

[dmdba@node3 ~]$ dmserver /data/dm/MPP_103/dm.ini mount
[dmdba@node2 ~]$ dmserver /data/dm/MPP_103_STA/dm.ini mount

9、修改数据库角色和oguid

主备库先disql登录后在修改

102主库

SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL> sp_set_oguid(45330);
SQL> alter database primary;
SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

102备库

SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL> sp_set_oguid(45330);
SQL> alter database standby;
SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

103主库

SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL> sp_set_oguid(45331);
SQL> alter database primary;
SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

103备库

SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL> sp_set_oguid(45331);
SQL> alter database standby;
SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);
dmdba@node2 dm]$ disql SYSDBA/SYSDBA@192.168.1.102:5217
[dmdba@node2 dm]$ disql SYSDBA/SYSDBA*local@192.168.1.102:5237

10、启动守护进程和监视器

启动守护

[dmdba@node2 ~]$ dmwatcher /data/dm/MPP_102/dmwatcher.ini 
[dmdba@node3 ~]$ dmwatcher /data/dm/MPP_103/dmwatcher.ini

启动监视器

[dmdba@node3 ~]$ dmmonitor /data/dm/MPP_103/dmmonitor.ini

11、注册服务

主机102

[root@node2 ~]# /data/dmdbms/script/root/dm_service_installer.sh -t dmserver -dm_ini /data/dm/MPP_102/dm.ini -p MPP_102
[root@node2 ~]# /data/dmdbms/script/root/dm_service_installer.sh -t dmserver -dm_ini /data/dm/MPP_103_STA/dm.ini -p MPP_103_STA
[root@node2 ~]# /data/dmdbms/script/root/dm_service_installer.sh -t dmwatcher -watcher_ini /data/dm/MPP_102/dmwatcher.ini -p MPP_102

主机103

[root@node3 ~]# /data/dmdbms/script/root/dm_service_installer.sh -t dmserver -dm_ini /data/dm/MPP_103/dm.ini -p MPP_103
[root@node3 ~]# /data/dmdbms/script/root/dm_service_installer.sh -t dmserver -dm_ini /data/dm/MPP_102_STA/dm.ini -p MPP_102_STA
[root@node3 ~]# /data/dmdbms/script/root/dm_service_installer.sh -t dmwatcher -watcher_ini /data/dm/MPP_103/dmwatcher.ini -p MPP_103
[root@node3 ~]# /data/dmdbms/script/root/dm_service_installer.sh -t dmmonitor -monitor_ini /data/dm/MPP_103/dmmonitor.ini -p MPP_103

更多资讯请上达梦技术社区了解： https://eco.dameng.com

champion0521
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
MPP集群搭建步骤.docx
10-25
dm8 达梦8 mpp集群搭建测试，适合学习达梦达梦数据库人群
达梦数据库
03-04
达梦大规模并行处理集群组件（DM Massively Paralleling Processing Cluster Component，缩写 DMMPP）是基于达梦数据库管理系统研发的完全对等无共享式的并行集群组件，支持将多个DM7节点 组织为一个并行计算网络，...
DM达梦数据库MPP集群搭建（带主备）
qq_44112838的博客
08-24 1027
DM8达梦数据库MPP带主备集群搭建
DM达梦数据库集群之分布式集群（MPP）
qing1122334455的博客
06-11 1244
提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档 文章目录前言一、目录与存储规划二、系统参数相关设置1.关闭防火墙2.关闭selinux3.创建安装用户和组4.修改操作系统资源限制5.修改内核参数7.创建数据文件存放目录8.修改用户dmdba环境变量三、安装数据库软件1.上传数据库软件到操作系统2.安装数据库软件（两台都要安装)3.初始化数据库实例4.配置相关参数文件A.配置实例的配置文件 dm.iniB.配置MAL系统配置文件dmmal.iniC.配置 MPP 控制文件 dmmpp.ct
11月数据库排行：PostgreSQL起飞、三巨头分数持续低迷
最新发布
2401_84103284的博客
04-27 559
PostgreSQL 和 MongoDB 与去年同期相比，分数增长明显，也是整个排行榜中除 Snowflake 外，分数增长最多的数据库：我们还留意到，DB-Engines 新增了一个「Sponsored post」的图标，会显示该数据库在他们网站上投放的“赞助稿”，按字面意思理解就是付费发表的推广文章。比如 PostgreSQL 发布了一篇题为"The Inexorable Rise of PostgreSQL"的文章。▲ 排名前十数据库的分数变化走向最后看看各类型数据库的排名情况。
达梦数据库MPP主备集群（3节点）环境搭建
Nelson_S的博客
03-27 2185
达梦数据库MPP主备集群（3节点）环境搭建一、 初始化实例二、 数据准备三、 配置A机器-主库MPP1_01四、 配置B机器-主库MPP1_02五、 配置C机器-主库MPP1_03六、 配置B机器-备库MPP1_01B七、 配置C机器-备库MPP1_02B八、 配置A机器-备库MPP1_03B九、 配置监视器十、 启动数据库十一、 启动守护进程十二、 启动监视器查看各个守护进程的状态 一、 初始化实例 1.A机器 2.B机器 3.C机器 二、 数据准备 1.主库01与备库01B 1）先启动一下主库 2
达梦MPP集群搭建
weixin_66378813的博客
04-11 848
目录 环境说明 数据准备 搭建MPP集群 配置 dm.ini 配置dmmpp.ctl 注册服务 环境说明 下面配置一个两节点 MPP集群，准备两台机器，MPP1和MPP2。两个节点都配置两块网卡，一块接入内部网络交换模块，一块接入到外部交换机。两节点实例名分别为MPP1和MPP2，相关的 IP、端口等规划见下表。 数据准备其他部署环境根据实际情况修改。 分别在MPPA和MPPB机器上分别初始化库MPP1和MPP2至目录/dm8/data。 ./dminit PATH=/d.
达梦.rar 国产达梦数据库文档全集
11-25
DM7系统管理员手册 DM7程序员手册 DM7_SQL语言使用手册 DM_Install_zh DM7大规模并行处理MPP DM7集群代理使用手册 DM7数据守护与读写分离集群V2.1 DM7系统包使用手册。。。
达梦数据库-MPP常见故障处理-常伟.pptx
06-21
"达梦数据库-MPP常见故障处理" MPP架构基础知识 ... 以上是达梦数据库-MPP常见故障处理的相关知识点，涵盖了MPP架构基础知识、MPP概念、MPP原理、MPP适用场景、MPP数据分布、常见集群故障处理等方面的内容。
达梦数据库DM8大规模并行处理MPP.pdf
10-14
DM8 MPP集群的搭建涉及节点配置、网络设置、数据分布策略等步骤，需要遵循官方文档指导。在使用过程中，需要注意监控系统性能，定期进行数据维护和优化，确保系统稳定运行。 总结，达梦数据库DM8的大规模并行处理...
达梦数据库DM8 MPP集群的搭建与使用
liuyanwei1024的博客
12-17 1059
达梦数据库DM8 MPP集群的搭建与使用达梦MPP集群简介一、集群规划二、配置步骤1.MPP1_01节点配置2.MPP1_02节点配置3.部署总结三、MPP集群的应用1.哈希分布2.随机分布3.复制分布4.范围分布5.LIST 分布6.数据分布后再分区四、DM MPP日常管理视图 达梦MPP集群简介 达梦大规模并行处理 MPP（DM Massively Parallel Processing，缩写 DM MPP）是基于达梦数据库管理系统的完全对等无共享式集群组件，支持将多个 DM 数据库实例组织为一个并行
2023年6月中国数据库排行榜：OceanBase 连续七月踞榜首，华为阿里谋定快动占先机
Era666的博客
06-15 3156
2023年6月中国数据库排行榜解读已发布！OTO组合连续两月开局，榜单竞争激烈。本月起专家解读板块由ACDU核心伙伴戴明明老师带来精彩点评。各大数据库排名有何变化、亮点？邀您一同查看！
2022年中国数据库排行榜年终盘点-墨天轮
Era666的博客
01-12 7604
刚刚过去的2022年里，墨天轮发布了12期中国数据库排行榜解读文章细数各家国产数据库的高光时刻。让我们乘坐时光列车，一起回顾他们的年度流行度趋势！
2023年10月中国数据库排行榜：墨天轮榜单前五开新局，金仓、亚信热度攀升
Era666的博客
10-19 2535
10月墨天轮中国数据库排行榜解读已发布！榜单前十变化较大、更是两年多来首次迎来新面孔，一起看看更多变化情况与解读！
2022年10月中国数据库排行榜：达梦冲刺IPO热度不减，PolarDB立足创新夺锦才
Era666的博客
10-17 2824
2022年10月的 墨天轮中国数据库流行度排行榜 火热出炉，本月共有245个数据库参与排名，相比上月新增七个数据库，本月排行榜前十名变动较大：达梦反超openGauss重摘探花；PolarDB上升一位居第五；TDSQL、GBase 较上月名次互换。
达梦数据库MPP搭建
CSDNWangJ的博客
07-10 1074
分布式数据库
2021年5月国产数据库排行榜：十强榜单固若金汤
热门推荐
05-12 1万+
本月共有127个数据库参与排名，TiDB、OceanBase 和 PolarDB继续保持着上个月的“T-O-P”阵容，GaussDB上升至第六位与TDSQL互换顺序，TOP10固若金汤。 2021年5月国产数据库排行榜新鲜出炉，本月TOP10榜单固若金汤，同时排名较往期变化较小，其中过半产品（6款）得分呈负增长，TiDB、OceanBase 和 PolarDB继续保持着上个月的“T-O-P”阵容，GaussDB上升至第六位与TDSQL互换顺序，其他8款产品均无排名变化。 状元TiDB流行度得分较上月.
达梦数据库 interval
08-03
在达梦数据库中，interval是一种分区方式，用于对表进行分区。间隔分区是在输入相应分区的数据时自动创建相应的分区。然而，达梦数据库中的间隔分区有一些限制。首先，它仅支持一级范围分区创建间隔分区。其次，只能...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值