MPP主备集群(非共享存储)

1. 数据准备

在这里插入图片描述

 A、B主机:

groupadd -g 12349 dinstall
useradd -u 12345 -g dinstall -d /home/dmdba -s /bin/bash dmdba
passwd dmdba
vim /etc/security/limits.conf

在这里插入图片描述

mkdir /dm
chown -R dmdba:dinstall /dm

 A主机初始化俩实例EP01\EP02,B主机也俩实例;

su – dmdba
chmod 755 ./DMInstall.bin
./DMInstall.bin -i
cd /dm/bin
./dminit path=/dm/data/EP01 charset=1
./dminit path=/dm/data/EP02 charset=1
su – root
cd /dm/script/root/
./dm_service_installer.sh -t dmserver -p SERVE1 -dm_ini /dm/data/EP01/DAMENG/dm.ini -m mount
./dm_service_installer.sh -t dmserver -p SERVE2 -dm_ini /dm/data/EP02/DAMENG/dm.ini -m mount
exit
         scp -r /dm/* dmdba@192.168.100.11:/dm

 A:EP01和B:EP02主备同步;A:EP02和B:EP01主备同步

A主机:

    cd /dm/bin
     ./dmserver /dm/data/EP01/DAMENG/dm.ini   ctrl+c
     ./dmserver /dm/data/EP02/DAMENG/dm.ini   ctrl+c
     ./dmrman
     backup database '/dm/data/EP01/DAMENG/dm.ini' backupset '/dm/bak/01';
     backup database '/dm/data/EP02/DAMENG/dm.ini' backupset '/dm/bak/02';
    scp -r /dm/bak dmdba@192.168.100.11:/dm/bak

B主机:

   su – dmdba
   cd /dm/bin	
   ./DmAPService start
   ./dmrman
   restore database '/dm/data/EP01/DAMENG/dm.ini' from backupset '/dm/bak/02';
   recover database '/dm/data/EP01/DAMENG/dm.ini' from backupset '/dm/bak/02';
   recover database '/dm/data/EP01/DAMENG/dm.ini' update DB_MAGIC;
   restore database '/dm/data/EP02/DAMENG/dm.ini' from backupset '/dm/bak/01';
   recover database '/dm/data/EP02/DAMENG/dm.ini' from backupset '/dm/bak/01';
   recover database '/dm/data/EP02/DAMENG/dm.ini' update DB_MAGIC;
   exit

2. 配置主库 GRP1_MPP_EP01

 配置 dm.ini

vim dm.ini

INSTANCE_NAME = G1_MPP_EP01
PORT_NUM = 5236 #数据库实例监听端口
DW_INACTIVE_INTERVAL = 60 #接收守护进程消息超时时间
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态/OGUID
ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间
MAL_INI = 1 #打开 MAL 系统
ARCH_INI = 1 #打开归档配置
MPP_INI = 1 #启用 MPP 配置
RLOG_SEND_APPLY_MON = 64 #统计最近 64 次的日志发送信息 

 配置 dmmal.ini

MAL_CHECK_INTERVAL = 5 #MAL 链路检测时间间隔
MAL_CHECK_INTERVAL = 5 #MAL 链路检测时间间隔
MAL_CONN_FAIL_INTERVAL = 5 #判定 MAL 链路断开的时间
[MAL_INST1]
 MAL_INST_NAME = G1_MPP_EP01 #实例名,和 dm.ini 中的 INSTANCE_NAME 一致   
 MAL_HOST = 192.168.100.10 #MAL 系统监听 TCP 连接的 IP 地址
 MAL_PORT = 5337 #MAL 系统监听 TCP 连接的端口
 MAL_INST_HOST = 192.168.10.10 #实例的对外服务 IP 地址
 MAL_INST_PORT = 5236 #实例的对外服务端口,和 dm.ini 中的 PORT_NUM 一致
 MAL_DW_PORT = 5253 #实例对应的守护进程监听 TCP 连接的端口
 MAL_INST_DW_PORT = 5243 #实例监听守护进程 TCP 连接的端口    
[MAL_INST2]
 MAL_INST_NAME = G2_MPP_EP01
 MAL_HOST = 192.168.100.11
 MAL_PORT = 5337
 MAL_INST_HOST = 192.168.10.11
 MAL_INST_PORT = 5236
 MAL_DW_PORT = 5253
MAL_INST_DW_PORT = 5243
[MAL_INST3]
 MAL_INST_NAME = G1_MPP_EP02
 MAL_HOST = 192.168.100.11
 MAL_PORT = 5338
 MAL_INST_HOST = 192.168.10.11
 MAL_INST_PORT = 5237
 MAL_DW_PORT = 5254
MAL_INST_DW_PORT = 5244
[MAL_INST4]
 MAL_INST_NAME = G2_MPP_EP02
 MAL_HOST = 192.168.100.10
 MAL_PORT = 5338
 MAL_INST_HOST = 192.168.10.10
 MAL_INST_PORT = 5237
 MAL_DW_PORT = 5254
MAL_INST_DW_PORT = 5244 

 配置 dmarch.ini(实时归档)

[ARCHIVE_REALTIME1]
ARCH_TYPE = REALTIME #实时归档类型
ARCH_DEST = G1_MPP_EP02 #实时归档目标实例名(备库)
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL #本地归档类型
ARCH_DEST = /dm/data/EP01/DAMENG/arch #本地归档文件存放路径
ARCH_FILE_SIZE = 128 #单位 Mb,本地单个归档文件最大值
ARCH_SPACE_LIMIT = 0 #单位 Mb,0 表示无限制,范围 1024~4294967294M

 配置 dmmpp.ctl

vim dmmpp.ini(俩主)

[service_name1]
mpp_seq_no = 0
mpp_inst_name = G1_MPP_EP01
[service_name2]
mpp_seq_no = 1
mpp_inst_name = G2_MPP_EP01
      cd /dm/bin
./dmctlcvt TYPE=2 SRC=/dm/data/EP01/DAMENG/dmmpp.ini DEST=/dm/data/EP01/DAMENG/dmmpp.ctl

 启动主库

./DmServiceSERVE1 start

 设置 OGUID

    ./disql sysdba/SYSDBA*LOCAL@192.168.100.10:5236
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL>sp_set_oguid(45330);
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

修改数据库模式

             SQL>alter database primary;
             SQL> exit;

3、配置主库 G2_MPP_EP01

    cd ../data/EP01/DAMENG/

 配置 dm.ini

INSTANCE_NAME = G2_MPP_EP01
PORT_NUM = 5236 #数据库实例监听端口
DW_INACTIVE_INTERVAL = 60 #接收守护进程消息超时时间
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态/OGUID
ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间
MAL_INI = 1 #打开 MAL 系统
ARCH_INI = 1 #打开归档配置
MPP_INI = 1 #启用 MPP 配置
RLOG_SEND_APPLY_MON = 64 #统计最近 64 次的日志发送信息 

 配置 dmmal.ini

可拷贝G1_MPP_EP01中dmmal.ini

scp dmdba@192.168.100.10:/dm/data/EP01/DAMENG/dmmal.ini ./

 配置 dmarch.ini(实时归档)

可拷贝G1_MPP_EP01中dmmarch.ini文件

scp dmdba@192.168.100.10:/dm/data/EP01/DAMENG/dmarch.ini ./

更改参数ARCH_DEST = G2_MPP_EP02(主库相对备库)

 配置 dmmpp.ctl

可拷贝G1_MPP_EP01中dmmpp.ctl文件

scp dmdba@192.168.100.10:/dm/data/EP01/DAMENG/dmmpp.ctl ./

 启动主库

./DmServiceSERVE1 start

 设置 OGUID

./disql sysdba/SYSDBA*LOCAL@192.168.100.11:5236
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL>sp_set_oguid(45331);
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

 修改数据库模式主库

alter database primary;

配置备库 G1_MPP_EP02

 配置 dm.ini

INSTANCE_NAME = G1_MPP_EP02
PORT_NUM = 5237 #数据库实例监听端口
DW_INACTIVE_INTERVAL = 60 #接收守护进程消息超时时间
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态/OGUID
ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间
MAL_INI = 1 #打开 MAL 系统
ARCH_INI = 1 #打开归档配置
MPP_INI = 1 #打开 MPP 配置
RLOG_SEND_APPLY_MON = 64 #统计最近 64 次的日志重演信息

 配置 dmmal.ini

可拷贝G1_MPP_EP01中dmmal.ini文件

     	 scp dmdba@192.168.100.10:/dm/data/EP01/DAMENG/dmmal.ini ./

 配置 dmarch.ini(实时归档)

可拷贝G1_MPP_EP01中dmarch.ini文件

scp dmdba@192.168.100.10:/dm/data/EP01/DAMENG/dmarch.ini ./

更改参数ARCH_DEST = G1_MPP_EP01

 配置 dmmpp.ctl

可拷贝G1_MPP_EP01中dmmpp.ctl文件

scp dmdba@192.168.100.10:/dm/data/EP01/DAMENG/dmmpp.ctl ./

 启动备库

cd /dm/bin
./DmServiceSERVE2 start

 设置 OGUID

./disql sysdba/SYSDBA*LOCAL@192.168.100.11:5237
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL>sp_set_oguid(45330);
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

 修改数据库模式

SQL> alter database standby;
SQL> exit;

配置备库 G2_MPP_EP02

    cd /dm/data/EP02/DAMENG/

 配置 dm.ini

INSTANCE_NAME = G2_MPP_EP02
PORT_NUM = 5237 #数据库实例监听端口
DW_INACTIVE_INTERVAL = 60 #接收守护进程消息超时时间
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态/OGUID
ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间
MAL_INI = 1 #打开 MAL 系统
ARCH_INI = 1 #打开归档配置
MPP_INI = 1 #打开 MPP 配置
RLOG_SEND_APPLY_MON = 64 #统计最近 64 次的日志重演信息

 配置 dmmal.ini

可拷贝G1_MPP_EP01中dmmal.ini文件

cp /dm/data/EP01/DAMENG/dmmal.ini ./

 配置 dmarch.ini

可拷贝G1_MPP_EP01中dmarch.ini文件

cp /dm/data/EP01/DAMENG/dmarch.ini ./

更改参数ARCH_DEST = G2_MPP_EP01

 配置 dmmpp.ctl

可拷贝G1_MPP_EP01中dmmpp.ctli文件

cp /dm/data/EP01/DAMENG/dmmpp.ctl ./

 启动备库

cd /dm/bin
./DmServiceSERVE2 start

 设置 OGUID

./disql sysdba/SYSDBA*LOCAL@192.168.100.10:5237
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL>sp_set_oguid(45330);
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

 修改数据库模式

SQL> alter database standby;
SQL> exit;

配置 dmwatcher.ini(A、B主机各配一个)

 A、B俩配置单的GRP1、GRP2需要一一对应

cd /dm/data/EP01/DAMENG/
vim dmwatcher.ini (当前服务器的俩库)

[GRP1]  
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 45330 #守护系统唯一 OGUID 值
INST_INI = /dm/data/EP01/DAMENG/dm.ini #dm.ini 配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /dm/bin/dmserver #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阈值,默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阈值,默认关闭
[GRP2]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 45331 #守护系统唯一 OGUID 值
INST_INI = /dm/data/EP02/DAMENG/dm.ini #dm.ini 配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /dm/bin/dmserver #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阈值,默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阈值,默认关闭

scp dmwatcher.ini dmdba@192.168.100.11:/dm/data/EP01/DAMENG/
注意组对应关系

配置监视器(需安装dm无需初始化)

cd /dm/data/
vim dmmonitor.ini

MON_DW_CONFIRM = 1 #确认监视器模式
MON_LOG_PATH = /dm/data/log #监视器日志文件存放路径
MON_LOG_INTERVAL = 60 #每隔 60s 定时记录系统信息到日志文件
MON_LOG_FILE_SIZE = 32 #每个日志文件最大 32M
MON_LOG_SPACE_LIMIT = 0 #不限定日志文件总占用空间
[GRP1]
MON_INST_OGUID = 45330 #组 GRP1 的唯一 OGUID 值
#以下配置为监视器到组 GRP1 的守护进程的连接信息,以―IP:PORT‖的形式配置
#IP 对应 dmmal.ini 中的 MAL_HOST,PORT 对应 dmmal.ini 中的 MAL_DW_PORT
MON_DW_IP = 192.168.100.10:5253
MON_DW_IP = 192.168.100.11:5254
[GRP2]
MON_INST_OGUID = 45331 #组 GRP2 的唯一 OGUID 值
#以下配置为监视器到组 GRP2 的守护进程的连接信息,以―IP:PORT‖的形式配置
#IP 对应 dmmal.ini 中的 MAL_HOST,PORT 对应 dmmal.ini 中的 MAL_DW_PORT
MON_DW_IP = 192.168.100.11:5253
MON_DW_IP = 192.168.100.10:5254

启动守护进程(A、B俩主机)

cd /dm/bin
./dmwatcher /dm/data/EP01/DAMENG/dmwatcher.ini

启动监视器

cd /dm/bin
./dmmonitor /dm/data/dmmonitor.ini
  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
### 回答1: MPP(Massively Parallel Processing)集群是一种高性能计算集群,旨在处理大规模数据集和复杂查询。MPP集群通常由数百个或数千个节点组成,每个节点都具有自己的处理器、内存和存储资源。这些节点通过高速网络相互连接,形成一个分布式计算环境。 MPP集群的主要特点包括: 1. 并行处理:MPP集群可以将任务分配给不同的节点,并并行处理多个查询或作业。这可以大大缩短处理时间,并提高性能和吞吐量。 2. 高可用性:由于MPP集群中的节点数量众多,因此即使出现节点故障或其他故障,整个集群也可以继续运行,保证高可用性和可靠性。 3. 可扩展性:MPP集群可以根据需要增加节点数量,以扩展计算和存储能力。这使得它们常适合大规模数据分析和处理任务。 4. 复杂查询支持:MPP集群支持处理复杂的SQL查询,包括联合、聚合、窗口函数等。 5. 数据分片和分布式存储:MPP集群可以将数据分片存储在不同的节点上,以实现更快的查询和更高的性能。此外,MPP集群通常使用分布式存储系统,如Hadoop HDFS、Amazon S3等,来存储和管理数据。 总之,MPP集群是一种强大的计算环境,可用于处理大规模数据集和复杂查询。它们通常用于数据仓库、商业智能、大数据分析等领域。 ### 回答2: mpp集群(Massively Parallel Processing Cluster,大规模并行处理集群)是一种通过将数据和计算任务在多台计算机上并行执行来实现高性能数据处理和分析的技术。 mpp集群的特点包括: 1. 可扩展性:mpp集群由多台计算机组成,可根据需求自由扩展集群规模。通过添加更多的计算节点,可以有效地处理更大规模的数据和更复杂的计算任务。 2. 并行计算:mpp集群将大规模的数据和计算任务分解为多个小任务,并且在多台计算机上并行执行。这种并行计算能够大大加速数据处理和分析的速度,提高系统的吞吐量。 3. 数据分布和负载均衡:mpp集群将数据划分为多个分片,并将这些分片分配给不同的计算节点。这样可以在数据处理过程中实现负载均衡,确保每个计算节点的负载相对均衡,避免出现热点节点和性能瓶颈。 4. 高可用性:通过在mpp集群中使用冗余计算节点和数据备份策略,可以提供高可用性。即使其中某个计算节点或数据存储发生故障,系统仍然可以继续正常运行,不会发生数据丢失或服务中断。 5. 并行存储和访问:mpp集群通常采用分布式文件系统或分布式存储系统来支持并行存储和访问。这些系统可以将大规模的数据存储在多个计算节点上,并通过并行读取和写入操作来实现高效的数据访问。 mpp集群广泛应用于大数据分析、数据仓库、商业智能等领域,能够满足处理海量数据和复杂计算任务的需求,提供高性能和可扩展的数据处理解决方案。 ### 回答3: MPP(Massively Parallel Processing)集群是一种并行计算架构,主要用于处理大规模数据和复杂计算任务。它由多个计算节点组成,每个节点都具有独立的计算和存储资源,节点之间通过高速网络进行通信。 在MPP集群中,数据通常被分割成多个分片,并存储在各个节点上。每个节点都可以并行处理自己的分片数据,这样就能够同时执行多个任务,大大提高了计算效率。节点之间还可以相互传递数据和计算结果,实现数据的交互与共享。 MPP集群具有以下特点: 1. 可伸缩性:MPP集群的规模可以根据需求进行扩展,添加更多的节点,以处理更大规模的数据和更复杂的计算任务。 2. 高性能:由于每个节点都具有独立的计算资源,并且能够并行处理任务,MPP集群能够以高效的方式执行计算,提供较低的响应时间和更高的吞吐量。 3. 高可用性:MPP集群通常采用冗余设计,即多个节点之间可以互相备份和恢复数据,当某个节点失败时,其他节点可以接替其工作,保证系统的可靠性和持续运行。 4. 灵活性:MPP集群支持多种数据处理和分析方式,例如数据存储、数据查询、数据挖掘和机器学习等。同时,它也能够与其他大数据技术如Hadoop和Spark等进行集成,共同构建复杂的数据处理解决方案。 MPP集群在大数据领域中应用广泛,特别适用于需要高性能计算和处理大规模数据的场景,如金融风险管理、科学研究、电信分析和电子商务等。通过充分利用MPP集群的并行计算能力,可以更快速、高效地处理和分析大量的数据,帮助企业做出更明智的决策和发现更有价值的信息。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值