达梦DM8守护集群规范化部署

已于 2024-01-25 14:56:54 修改
阅读量1.2k 收藏 28
点赞数 22
文章标签： github
于 2024-01-25 14:49:10 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/2301_78312656/article/details/135842414
版权

一、服务器硬件要求：

1、按实际业务需求，选择合适的服务器，准备3台服务器，一台主库服务器，一台备库服务器，一台监视器服务器，如果资源限制只有2台服务器，可将监视器配置在主、备任意一台服务器上，服务器参数建议如下：

（1）物理内存：>=16G

（2）交换区：swap空间>=物理内存

（3）/tmp大小：>100MB

（4）网络：物理机器需要4个网卡，2个public网卡做band，2个private网卡做band

（5）磁盘：根据实际应用系统需要挂载合适大小磁盘

（6）时间服务器：按机房要求配置连接时间服务器

注意：守护进程配置自动切换时，必须在监视器服务器上配置确认监视器，并且保证网络高可用。

2、操作系统要求

操作系统版本安装：DM数据库安装在linux操作系统所需条件：glibc2.3以上，内核2.6，预先安装UnixODBC,系统性能监控等组件。

二、目录与存储规划（用途、目录路径）

（1）数据库软件安装目录：/dm8/dmdbms，可用空间>50GB

（2）实例安装目录：/dmdata，单独挂载性能最好的磁盘，建议SSD

（3）归档日志存放目录：/dmarch，单独挂载磁盘

（4）备份文件存放目录：/dmbak，单独挂载磁盘

三、端口规划（防火墙设置）

搭建2节点守护集群，端口规划如下：（实际中可以按需要修改端口号）

主机名

public IP

private IP

实例名

端口

用途

dm1

192.168.72.11

10.0.0.11

dmsvr1

5237

数据库实例dmrw1监听端口

dm1

192.168.72.11

10.0.0.11

dmsvr1

61141

MAL系统监听TCP连接的端口

dm1

192.168.72.11

10.0.0.11

dmsvr1

52141

实例本地的守护进程监听TCP连接的端口

dm1

192.168.72.11

10.0.0.11

dmsvr1

33141

实例监听守护进程TCP连接的端口

dm2

192.168.72.12

10.0.0.12

dmsvr2

5237

数据库实例dmrw2监听端口

dm2

192.168.72.12

10.0.0.12

dmsvr2

61141

MAL系统监听TCP连接的端口

dm2

192.168.72.12

10.0.0.12

dmsvr2

52141

实例本地的守护进程监听TCP连接的端口

dm2

192.168.72.12

10.0.0.12

dmsvr2

33141

实例监听守护进程TCP连接的端口

防火墙集群之间需开放以上所有的端口，集群对客户端只需要开通数据库实例监听端口。

四、服务器环境检查与配置（每个节点均需执行）

1、创建用户与用户组

创建用户和组：DM数据库不应该使用root用户安装和维护，需要在安装之前为DM数据库创建一个专用的系统用户（dmdba)和用户组（dinstall).
（1）新建用户组：groupadd dinstall
（2）新建用户：useradd -g dinstall -m -d /home/dmdba -s /bin/bash dmdba
（3）设置用户dmdba密码：passwd dmdba输入密码并确认。

2、设置用户资源限制

修改dmdba用户资源限制：
vim /etc/security/limits.conf
文件末尾添加以下内容：
dmdba soft core unlimited
dmdba hard core unlimited
dmdba soft nofile 65536
dmdba hard nofile 65536
dmdba soft nproc 65536
dmdba hard nproc 65536
dmdba soft stack 65536
dmdba hard stack 65536

添加用户会话登录限制
vi /etc/pam.d/login添加上：
session   required   pam_limits.so

添加系统内核参数限制
vi /etc/sysctl.conf添加上：
vm.overcommit_memory=0
kernel.core_pattern=/dm8/dmcore/core-%e-%p-%t
执行下列命令使系统内核参数立刻生效
sysctl -p

3、创建目录与授权

mkdir -p /dm8/dmdbms
mkdir /dmarch
mkdir /dmsqllog
mkdir /dmdata
mkdir /dmcore
chmod -R 755 /dm8 /dmarch /dmsqllog /dmdata /dmcore
chown -R dmdba:dinstall /dm8 /dmarch /dmsqllog /dmdata /dmcore

4、关闭防火墙

systemctl stop firewalld.service
systemctl disable firewalld.service

5、添加用户环境变量

修改dmdba用户环境变量：
vi /home/dmdba/.bash_profile
文件末尾添加以下内容：
export DM_HOME=/home/dmdba/dmdbms
export PATH=$PATH:$DM_HOME/bin
export LD_LIBRARY_PATH=$LD_LIBRARY_PATH:$DM_HOME/bin

五、数据库安装与集群部署

1、数据库安装（与单机规范化部署中的数据库安装基本一致，两节点均执行）

软件安装目录：/home/dmdba/dmdbms

实例初始化目录：/dmdata

初始化脚本内容如下：

初始化请根据实际项目要求，例如：
（1）数据库名DM01，实例名DMSVR01，端口号5237--生产环境一般有安全整改要求不能使用默认端口号
（2）页大小16k，簇大小32，日志文件大小500M
（3）字符串大小写敏感
（4）sysdba用户密码为DM01SYSDBA
./dminit  path=/dm8/data/  port_num=5237    DB_NAME=DM01  INSTANCE_NAME=DM01SVR PAGE_SIZE=16 EXTENT_SIZE=32  CASE_SENSITIVE=1 SYSDBA_PWD=DM01SYSDBA

注册服务（root用户下执行）：
cd/dm8/dmdbms/script/root
./dm_service_installer.sh -t dmserver -p DM01SVR -dm_ini /dm8/data/DM01/dm.ini
注册完成后切换到dmdba启动数据库实例：
DmServiceDM01SVR start

2、开启归档（两节点均执行）

su - dmdba
disql SYSDBA/DM01SYSDBA:5237
alter database mount;
alter database archivelog;
select arch_mode from v$database;
alter database add archivelog 'type=local,dest=/dmarch,file_size=1024,space_limit=102400';
alter database open;


查看归档是否开启
select * from v$dm_arch_ini;

3、主库脱机备份

dmdba用户关闭数据库实例
mkdir -p /dm8/dmbak  #主备两台服务器均需创建备份目录
cd $DM_HOME/bin
DmServiceDM01SVR stop
启动ap服务
./DmAPService start
./dmrman
backup database '/dmdata/DM01/dm.ini' full backupset '/dm8/dmbak/db_full_bak_1';
exit;
scp  -r /dm8/dmbak/db_full_bak_1 dmdba@备库IP:/dm8/dmbak/

4、备库脱机还原

关闭数据库实例
cd /dm8/dmdbms/bin
启动ap服务
./DmAPService start
./dmrman
check backupset '/dm8/dmbak/db_full_bak_1';
restore database '/dmdata/DM01/dm.ini' from backupset '/dm8/dmbak/db_full_bak_1';
recover database '/dmdata/DM01/dm.ini' from backupset '/dm8/dmbak/db_full_bak_1';
recover database '/dmdata/DM01/dm.ini' update db_magic;

5、配置实例的dm.ini文件

主库：
INSTANCE_NAME =DMSVR01
MAL_INI = 1
ARCH_INI = 1
ALTER_MODE_STATUS = 0
ENABLE_OFFLINE_TS = 2

备库：
INSTANCE_NAME = DMSVR02
MAL_INI = 1
ARCH_INI = 1
ALTER_MODE_STATUS = 0
ENABLE_OFFLINE_TS = 2

6、修改归档配置文件dmarch.ini

主库：vi dmarch.ini
[ARCHIVE_REALTIME]
ARCH_TYPE = REALTIME
ARCH_DEST = DMSVR02
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL 
ARCH_DEST =/dmarch 
ARCH_FILE_SIZE = 2048 
ARCH_SPACE_LIMIT = 102400

备库：
[ARCHIVE_REALTIME]
ARCH_TYPE = REALTIME
ARCH_DEST = DMSVR01
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL 
ARCH_DEST =/dmarch 
ARCH_FILE_SIZE = 2048 
ARCH_SPACE_LIMIT = 102400

7、配置MAL通信文件dmmal.ini（主备均需配置且内容一致）

cd /dmdata/DM01
vi dmmal.ini
MAL_CHECK_INTERVAL = 5
MAL_CONN_FAIL_INTERVAL = 5 
[MAL_INST1]
MAL_INST_NAME = DMSVR01
MAL_HOST = 主库IP 
MAL_PORT = 61141 
MAL_INST_HOST = 主库IP 
MAL_INST_PORT =5237 
MAL_DW_PORT = 52141 
MAL_INST_DW_PORT = 33141
[MAL_INST2]
MAL_INST_NAME = DMSVR02
MAL_HOST =备库IP
MAL_PORT = 61142
MAL_INST_HOST = 备库IP
MAL_INST_PORT =5237
MAL_DW_PORT = 52141
MAL_INST_DW_PORT = 33141

8、添加守护进程配置文件dmwatcher.ini（主备均需配置且内容一致）

cd /dmdata/DM01
vi dmwatcher.ini
[GRP1]
DW_TYPE = GLOBAL 
DW_MODE = AUTO 
DW_ERROR_TIME = 120 
INST_RECOVER_TIME = 60 
INST_ERROR_TIME = 120 
INST_OGUID = 453331 
INST_INI = /dmdata/DM01/dm.ini 
INST_AUTO_RESTART = 0 
INST_STARTUP_CMD =/dm8/dmdbms/bin/dmserver 
RLOG_SEND_THRESHOLD = 0 
RLOG_APPLY_THRESHOLD = 0

9、以mount的方式启动数据库实例，主备库修改oguid

主备依次执行：
./dmserver /dmdata/DM01/dm.ini mount
或者DmServiceDMSVR01 start mount

另开一个窗口disql连接数据库主备库都修改oguid

主库
SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
sp_set_oguid(453331);
alter database primary;
SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

备库：
SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
sp_set_oguid(453331);
alter database standby;
SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);

10、启动守护进程

root用户注册守护进程服务：
./dm_service_installer.sh -t dmwatcher -p DmWatcher -watcher_ini /dmdata/DM01/dmwatcher.ini

主备依次执行:
DmWatcher start

11、添加监视器配置文件dmmonitor.ini

在另一台安装达梦数据库软件的监视器服务器上配置，或者直接在主备任意一个节点上配置也可行

cd $DM_HOME/bin
vi /dm8/dmdbms/bin/dmmonitor.ini
MON_DW_CONFIRM    = 1   #确认监视器模式
MON_LOG_PATH    = /dm8/dmdbms/log 
MON_LOG_INTERVAL  = 60 
MON_LOG_FILE_SIZE   = 32 
MON_LOG_SPACE_LIMIT  = 0 
[GRP1] 
 MON_INST_OGUID    = 453331 
 MON_DW_IP     = 主库IP:52141
 MON_DW_IP     = 备库IP:52141

启动监视器：
[dmdba@localhost DAMENG]$ cd /dm8/bin
[dmdba@localhost bin]$ ./dmmonitor /dm8/data/DAMENG/dmmonitor.ini

12、查看集群状态，主备切换两次验证

$ su - dmdba
$ cd /dm8/dmdbms/bin
$ ./dmmonitor /dm8/dmdbms/bin /dmmonitor.ini
show  #查看集群状态
login  #登录监视器
switchover  #切换主备
show
switchover  #再次切换还原主、备库

13、测试验证数据同步

主库建表插入数据
create table t2(id int);
insert into t2 values (1);
insert into t2 values (2);
commit;

备库查询表数据是否正常同步：
select * from t2;

                                                    学习社区： 达梦在线服务平台（https://eco.dameng.com） 

yr--heart
关注
达梦3节点DSC+1节点DW集群部署
qq_42407619的博客
04-26 1164
DSC集群各大节点之间是相互独立且平等的存在，一旦某个节点发生故障，集群将会自动切换使其离线重新更改，重新开启服务后将会自动填充离线期间所丢失的数据更新。这种结构安全性、可靠性更高。 0.0部署结果 0.1制造故障节点dsc1 关闭dsc1节点的服务 可在三号机中的监视器查看到自动更新的信息 此时在dsc0节点 新建用户名、密码以及权限： create user "DMDBA" identified by "dameng_dba"; //创建名为DMDBA和...
达梦数据库集群部署（已实现）
记录开发日常笔记
05-26 3069
达梦数据库集群部署
数据库服务基础
最新发布
2401_83050225的博客
08-06 638
3、noop，固态硬盘，无论cfq还是deadline，都是针对机械硬盘的结构进行的队列算法调整，而这种调整对于固态硬盘来说，完全没有意义。对于固态硬盘来说，IO调度算法越复杂，效率就越低，因为额外要处理的逻辑越多。所以，固态硬盘这种场景下，使用noop是最好的，deadline次之，而cfq由于复杂度的原因，无疑效率最低。2、deadline是一种以提高机械硬盘吞吐量为思考出发点的调度算法，只有当有io请求达到最终期限的时候才进行调度，非常适合业务比较单一并且IO压力比较重的业务，比如数据库。
达梦数据库集群部署（主备）
m0_71845127的博客
03-07 825
达梦数据库集群部署（主备）
【达梦数据库】数据守护集群部署
花村游戏店老板的博客
07-26 759
DM数据守护（DM Data Watch）的实现原理：将主库（生产库）产生的Redo日志传输到备库，备库接收并重新应用Redo日志，从而实现备库与主库的数据同步。DM数据守护的核心思想是监控数据库状态，获取主、备库数据同步情况，为Redo日志传输与重演过程中出现的各种异常情况提供一系列的解决方案。DM数据守护可以配置成实时主备、MPP主备、读写分离、DSC守护。DM数据守护系统主要由主库、备库、Redo日志、Redo日志传输、Redo日志重演、守护进程dmwatcher、监视器dmmonitor组成。
达梦数据库--DM8两节点DSC 集群安装部署（超详细）
disclipline的博客
05-25 1882
DSC 正常停库必须 2 节点同时停止，根据目前脚本配置，CSS 启动后 30 秒自动拉起 ASM，60 秒自动拉起 DMSERVER，所以停止 DMSERVER 和 ASM 后，要尽快停止 CSS，避免被自动拉起。A/B 机器：[dmdba@~]#/dm/dmdbms/bin/DmCSSServiceCSS start##说明：CSS 启动后 30 秒自动拉起 ASM，60 秒自动拉起 DMSERVER。DCR 是 DM 集群注册表的简称，用于存储、维护集群配置的详细信息，一个集群一个注册表。
达梦8主备集群搭建部署
07-22
* 上传 dm8 安装包并挂载：需要上传达梦数据库的安装包并挂载到节点上以便安装数据库软件。 二、配置数据库实例 * 配置主备两个节点的数据库实例：需要在每个节点上配置数据库实例，以便实现数据的备份和还原。 * ...
达梦数据库DM8数据守护集群部署及测试
01-27
达梦数据库DM8数据守护集群部署及测试
达梦数据库DM8读写分离集群部署
01-27
达梦数据库DM8读写分离集群部署 达梦数据库DM8读写分离集群部署是指在达梦数据库DM8中实现读写分离和集群部署，以提高数据库的性能和可用性。在本文中，我们将详细介绍达梦数据库DM8读写分离集群部署的步骤和配置。...
达梦数据库DM8集群代理使用手册.pdf
10-19
DM8 集群代理使用手册是达梦数据库 DM8 的一个重要组件，提供了集群架构、功能模块管理、接口管理等方面的详细介绍。下面是对标题、描述、标签和部分内容的详细解释。 标题： 达梦数据库 DM8 集群代理使用手册 ...
java连接达梦DM8数据库的驱动包和方言包.zip
05-18
Java连接达梦DM8数据库的过程中，驱动包和方言包是必不可少的组件，它们使得Java应用程序能够与DM8数据库进行通信并执行SQL语句。DM（DataMatrix）是达梦公司推出的一款高性能、高安全性的关系型数据库管理系统，...
达梦数据库在Linux上主备集群部署流程
qq_53021687的博客
09-02 2321
适用于密集交易型场景的共享存储集群，采用单库多实例架构，基于共享存储上的多个节点对外提供服务，实现高吞吐量；自动接管故障节点，保证系统高可用性；是适合金融行业核心生产系统的解决方案
达梦数据库dm8守护集群部署手册
king_harry的专栏
12-08 1979
注： MAL_HOST与MAL_INST_HOST在生产环境下要设置不同网卡不同IP地址，MAL_HOST用于对外服务地址，MAL_INST_HOST用于集群间的心跳通讯、数据同步。##通过修改 grub 配置，在 “GRUB_CMDLINE_LINUX=” 配置参数结尾加入 “transparent_hugepage=never”，可以永久关闭透明大页内存。对应 MAL_HOST，PORT 对应 MAL_DW_PORT。对应 MAL_HOST，PORT 对应 MAL_DW_PORT。
达梦DMDSC集群部署搭建
dcps75321的博客
01-02 1351
环境准备 （1）需要2台虚机，内存最好2G以上。每台虚机装好DM8，装好后不需要初始化。（2）本文为机器起名，第一台叫节点1，第二台叫节点2，方便称呼。因为是学习使用，因此使用vmware搭建。 （3）为节点1挂载一块磁盘，需关机，然后vmware上编辑虚机设置，添加一块硬盘（生产上可以找运维帮忙挂，必须是裸设备）。生产上建议挂2块及以上，数据和日志分开存放。 这边建议该硬盘为单个文件，“虚拟设备节点”，选择1:0。 （4）第二个节点，关机，添加硬盘，选择现有硬盘，浏览并选择节点1的硬盘文件(.vmdk)
部署达梦主备集群
m0_58810155的博客
08-27 350
打开VM→编辑→虚拟网络编辑器→更改设置，添加网络，这里选择了VMnet2，选择仅主机模式，设置DHCP。分别为每台虚拟机添加一个网络适配器，在网络连接设置中选择“自定义”，选择刚刚添加的虚拟网络。自动切换：在确认监视器上（必须非集群节点），存放确认监视器配置文件，并注册后台自启服务。手动切换：集群各节点的 bin 目录中，存放非确认监视器配置文件。为三台虚拟机各添加一个网卡，接入内部网络交换模块。若要删除自启，可以用以下命令。若要删除自启，可以用以下命令。若要删除自启，可使用以下命令。
Linux系统DM8主备集群部署
knight195的博客
07-24 145
环境准备：2-3台已经安装DM8的虚拟机 一、数据准备 1、配置dm.ini，打开归档 2、配置dmarch.ini 脱机备份及还原 1、正常关闭数据库 2、进行脱机备份 3、将主库的备份文件拷贝到备库所在机器 4、在备库执行脱机数据库还原与恢复 二、配置实时主备 1、配置主库 1）配置dm.ini ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态/OGUID ENABLE_OFFLINE_TS = 2 #...
DM8 MPP集群部署
miracle
07-12 308
DM8 MPP集群
Linux环境下达梦数据库基于实时主备集群的异步备库的部署
weixin_61878106的博客
10-20 491
Linux环境下达梦数据库基于实时主备集群的异步备库的部署
达梦DSC集群部署
cn_lyt的博客
12-06 637
达梦DSC概述（摘自达梦官方文档） DMDSC 集群是一个多实例、单数据库的系统。多个数据库实例可以同时访问、修改同 一个数据库的数据。用户可以登录集群中的任意一个数据库实例，获得完整的数据库服务。 数据文件、控制文件在集群系统中只有一份，不论有几个节点，这些节点都平等地使用这些 文件，这些文件保存在共享存储上。每个节点有自己独立的联机日志和归档日志，其中联机 日志保存在共享存储上，归档日志可以保存在本地存储上也可以保存在共享存储上。 DMDSC 集群得以实现的重要基础就...
达梦DM8 MPP集群搭建教程
"该文档详细介绍了如何在本地环境中搭建达梦8 (DM8) MPP (大规模并行处理) 集群，适用于学习和测试达梦数据库的用户。文档涵盖了端口规划、软件安装与数据存储目录设置、实例初始化、服务注册、实例启动、归档设置...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值