DM数据守护主备集群搭建

最新推荐文章于 2024-01-30 19:04:00 发布
最新推荐文章于 2024-01-30 19:04:00 发布
阅读量161 收藏
点赞数
分类专栏： DM DM收据守护主备搭建 主备搭建 文章标签： 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/a457646454/article/details/116656589
版权

服务器硬件需求

准备 3 台服务器，一台主库服务器，一台备库服务器，一台监视器服务器

依次主、备、监视器

创建用户和组

三台机器都需要创建用户和组

groupadd dinstall
useradd  -g dinstall -m -d /home/dmdba -s /bin/bash  dmdba
passwd dmdba
--修改 dmdba 用户资源限制
vim /etc/security/limits.conf  
--文件末尾加入
dmdba soft core unlimited
dmdba hard core unlimited
dmdba soft nofile 65536
dmdba hard nofile 65536
dmdba soft nproc  65536
dmdba hard nproc  65536
dmdba soft stack  65536
dmdba hard stack  65536

--修改用户环境变量
vi /home/dmdba/.bash_profile
--文件末尾加入
export DM_HOME=/home/dmdba/dmdbms
export PATH=$PATH:$DM_HOME/bin
export LD_LIBRARY_PATH=$LD_LIBRARY_PATH:$DM_HOME/bin
 
 --关掉防火墙
 systemctl stop firewalld
 --禁止开机启动
 systemctl disable firewalld

安装数据库初始化实例

普通单机安装

初始化实例

./dminit path=/home/dmdba/dmdbms db_name=dmrw page_size=32

初始化的实例必须先启动一次，才能脱机备份。

数据库实例注册为操作系统服务

cd /dm8/script/root/
./dm_service_installer.sh -t dmserver -p dmserver -dm_ini /home/dmdba/dmdbms/dmrw/dm.ini
 --注册完启动数据库
 systemctl start DmServicedmserver

关闭数据库后，使用 dmrman 工具脱机备份主库

./dmrman

backup database '/home/dmdba/dmdbms/dmrw/dm.ini' backupset '/home/dmdba/bakfull';

备库还原

拷贝主库备份到备库合适目录

scp -r /home/dmdba/bakfull 192.168.254.43:/home/dmdba

关闭数据库后，使用 dmrman 工具还原备库，dmdba 用户到安装目录的 bin 下执行以下命令：

./dmrman
--执行 restore
restore database '/home/dmdba/dmdbms/dmrw/dm.ini' from backupset '/home/dmdba/bakfull';
 --执行 recover
 recover database '/home/dmdba/dmdbms/dmrw/dm.ini' from backupset '/home/dmdba/bakfull';
 --执行 recover update db_magic
 recover database '/home/dmdba/dmdbms/dmrw/dm.ini' update db_magic;

配置实例的配置文件 dm.ini

修改实例的 dm.ini 文件参数，执行以下命令

vi /home/dmdba/dmdbms/dmrw/dm.ini

主库修改以下参数值：

INSTANCE_NAME = dmrw1
MAL_INI = 1
ARCH_INI = 1
ALTER_MODE_STATUS = 0
ENABLE_OFFLINE_TS = 2

备库修改以下参数值：

INSTANCE_NAME = dmrw2
MAL_INI = 1
ARCH_INI = 1
ALTER_MODE_STATUS = 0
ENABLE_OFFLINE_TS = 2

配置归档配置文件 dmarch.ini

在实例目录下新建文件 dmarch.ini，执行以下命令：

vi /home/dmdba/dmdbms/dmrw/dmarch.ini

主库添加以下内容：

[ARCHIVE_REALTIME]
ARCH_TYPE     = REALTIME  #实时归档类型
ARCH_DEST     = dmrw2   #实时归档目标实例名（主库侧填写备库实例名）
[ARCHIVE_LOCAL1]
ARCH_TYPE     = LOCAL #本地归档类型
ARCH_DEST     = /home/dmdba/dmdbms/arch #本地归档文件存放路径
ARCH_FILE_SIZE    = 128 #单位 MB，本地单个归档文件最大值
ARCH_SPACE_LIMIT  = 10240    #单位 MB，0 表示无限制，范围 1024~4294967294 MB

备库添加以下内容：

[ARCHIVE_REALTIME]
ARCH_TYPE     = REALTIME  #实时归档类型
ARCH_DEST     = dmrw1   #实时归档目标实例名（备库侧填写主库实例名）
[ARCHIVE_LOCAL1]
ARCH_TYPE     = LOCAL #本地归档类型
ARCH_DEST     = /home/dmdba/dmdbms/arch  #本地归档文件存放路径
ARCH_FILE_SIZE    = 128 #单位 MB，本地单个归档文件最大值
ARCH_SPACE_LIMIT  = 10240    #单位 MB，0 表示无限制，范围 1024~4294967294 MB

配置MAL系统配置文件 dmmal.ini

在实例目录下新建文件 dmmal.ini，执行以下命令：

vi /home/dmdba/dmdbms/dmrw/dmmal.ini

主备库文件内容要相同

MAL_CHECK_INTERVAL   = 5  #MAL 链路检测时间间隔
MAL_CONN_FAIL_INTERVAL  = 5  #判定 MAL 链路断开的时间
[MAL_INST1]
  MAL_INST_NAME = dmrw1 #与 dm.ini 中的 INSTANCE_NAME 一致
  MAL_HOST     = 192.168.254.31  #MAL 系统监听 TCP 内部网络 IP
  MAL_PORT     = 61141 #MAL 系统监听 TCP 连接的端口
  MAL_INST_HOST   = 192.168.254.131  #实例的对外服务 IP 地址
  MAL_INST_PORT   = 5236 #与 dm.ini 中的 PORT_NUM 一致
  MAL_DW_PORT   = 52141 #实例对应的守护进程监听 TCP 端口
  MAL_INST_DW_PORT = 33141
[MAL_INST2]
  MAL_INST_NAME = dmrw2 #与 dm.ini 中的 INSTANCE_NAME 一致
  MAL_HOST      = 192.168.254.43  # MAL 系统监听 TCP 内部网络 IP
  MAL_PORT          = 61141 #MAL 系统监听 TCP 连接的端口
  MAL_INST_HOST         = 192.168.254.143  #实例的对外服务 IP 地址
  MAL_INST_PORT         = 5236 #与 dm.ini 中的 PORT_NUM 一致
  MAL_DW_PORT  = 52141 #实例对应的守护进程监听 TCP 端口
  MAL_INST_DW_PORT = 33141

配置守护进程配置文件 dmwatcher.ini

在实例目录下新建文件 dmwatcher.ini，执行以下命令：

vi /home/dmdba/dmdbms/dmrw/dmwatcher.ini

主备库文件内容要相同。

[GRP_RW] 
DW_TYPE    = GLOBAL  #全局守护类型
DW_MODE    = AUTO   #自动切换模式
DW_ERROR_TIME     = 10  #远程守护进程故障认定时间
INST_RECOVER_TIME  = 60         #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME   = 10  #本地实例故障认定时间
INST_OGUID         = 453331 #守护系统唯一 OGUID 值
INST_INI           = /home/dmdba/dmdbms/dmrw/dm.ini #dm.ini 配置文件路径
INST_AUTO_RESTART  = 1   #打开实例的自动启动功能
INST_STARTUP_CMD   = /home/dmdba/dmdbms/bin/dmserver #命令行方式启动

以 Mount 方式启动数据库实例

使用 dmdba 用户，到数据库安装目录的 bin 下执行（主备库都执行）。

./dmserver /home/dmdba/dmdbms/dmrw/dm.ini mount

在新的终端使用 disql 工具连接数据库，执行以下命令：

./disql SYSDBA/SYSDBA
--若登录失败采取这种方式登录
./disql SYSDBA/SYSDBA@192.168.254.131:5236

主备库都修改 oguid，执行以下命令：

sp_set_oguid(453331);

主库修改数据库模式为 primary，执行以下命令：

alter database primary;

备库修改数据库模式为 standby，执行以下命令：

alter database standby;

启动守护进程

dmdba 用户下，到数据库安装目录的 bin 下执行（主备库都执行）。

./dmwatcher /home/dmdba/dmdbms/dmrw/dmwatcher.ini

守护进程启动后，会将 Mount 的实例 Open。

启动确认监视器

守护进程配置为自动切换时，必须配置确认监视器。在主备服务器以外的服务器上（需安装有 DM 数据库软件，且与主备心跳网络端口开放）。

新建确认监视器配置文件 dmmonitor.ini，执行以下命令：

vi /home/dmdba/dmdbms/dmmonitor.ini

添加以下内容：

MON_DW_CONFIRM    = 1   #确认监视器模式
MON_LOG_PATH    = /home/dmdba/dmdbms/log #监视器日志文件存放路径
MON_LOG_INTERVAL  = 60 #每隔 60 s 定时记录系统信息到日志文件
MON_LOG_FILE_SIZE   = 32 #每个日志文件最大 32 MB
MON_LOG_SPACE_LIMIT  = 0  #不限定日志文件总占用空间
[GRP_RW] 
 MON_INST_OGUID    = 453331 #组 GRP_RW 的唯一 OGUID 值
#以下配置为监视器到组 GRP_RW 的守护进程的连接信息，以“IP:PORT”的形式配置
#IP 对应 dmmal.ini 中的 MAL_HOST，PORT 对应 dmmal.ini 中的 MAL_DW_PORT
 MON_DW_IP     = 192.168.254.31:52141
 MON_DW_IP     = 192.168.254.43:52141

启动监视器，执行以下命令：

./dmmonitor /home/dmdba/dmdbms/dmmonitor.ini

启动后输入 show 命令查看集群状态。

注册服务

以上启动为前台方式启动，仅用户搭建过程中验证配置。配置没问题后需要将实例，守护进程和确认监视器注册为系统服务。使用 root 用户，到数据库安装目录的 script/root 下，执行。

注册守护进程服务（主备库都执行）。

./dm_service_installer.sh -t dmwatcher -p dmrw -watcher_ini /home/dmdba/dmdbms/dmrw/dmwatcher.ini

注册数据库实例服务（主备库都执行）。

./dm_service_installer.sh -t dmserver -p dmrw -dm_ini /home/dmdba/dmdbms/dmrw/dm.ini

注册监视器服务（只需在监视器服务器上执行），执行以下命令：

./dm_service_installer.sh -t dmmonitor -p confirm -monitor_ini /home/dmdba/dmdbms/dmmonitor.ini

以服务方式启动

启动数据库实例，执行以下命令：

systemctl start DmServicedmrw

启动守护进程，执行以下命令：

systemctl start DmWatcherServicedmrw

启动监视器，执行以下命令

systemctl start DmMonitorServiceconfirm

验证主备集群同步状态

监视器查看读写分离集群状态

集群任意节点，配置普通监视器配置文件 dmmonitor.ini，执行以下命令：

vi /home/dmdba/dmmonitor.ini

添加以下内容：

MON_DW_Confirm    = 0   #普通监视器模式
MON_LOG_PATH    = /home/dmdba/dmdbms/log  #监视器日志文件存放路径
MON_LOG_INTERVAL  = 60 #每隔 60 s 定时记录系统信息到日志文件
MON_LOG_FILE_SIZE   = 32 #每个日志文件最大 32 MB
MON_LOG_SPACE_LIMIT  = 0  #不限定日志文件总占用空间
[GRP_RW] 
 MON_INST_OGUID    = 453331 #组 GRP_RW 的唯一 OGUID 值
#以下配置为监视器到组 GRP_RW 的守护进程的连接信息，以“IP:PORT”的形式配置
#IP 对应 dmmal.ini 中的 MAL_HOST，PORT 对应 dmmal.ini 中的 MAL_DW_PORT
 MON_DW_IP     = 192.168.254.31:52141
 MON_DW_IP     = 192.168.254.43:52141

启动监视器，执行以下命令：

./dmmonitor /home/dmdba/dmmonitor.ini

其中守护进程状态 WSTATUS 为 OPEN，实例状态 ISTATUS 为 OPEN，归档类型 RTYPE 为 REALTIME，归档状态 RSTAT 为VALID。

disql 客户端验证

使用 disql 客户端登录主库，创建测试表，插入数据，执行以下命令：

./disql SYSDBA/SYSDBA@192.168.254.31:5236

SQL 提示符下执行以下命令：

create table test(id int);
insert into test values (1);
commit;

使用 disql 客户端登录备库，查询测试表验证，执行以下命令：

./disql SYSDBA/SYSDBA@192.168.254.43:5236
SQL 提示符下执行以下命令：
select * from test;

重启集群

主备集群重启有顺序要求：

  1. 关闭监视器：systemctl stop DmMonitorServiceconfirm
  2. 关闭主库守护进程：systemctl stop DmWatcherServicedmrw
  3. 关闭备库守护进程：systemctl stop DmWatcherServicedmrw
  4. 关闭主库实例：systemctl stop DmServicedmrw
  5. 关闭备库实例：systemctl stop DmServicedmrw
  6. 启动主库实例：systemctl start DmServicedmrw
  7. 启动备库实例：systemctl start DmServicedmrw
  8. 启动主库守护进程：systemctl start DmWatcherServicedmrw
  9. 启动备库守护进程：systemctl start DmWatcherServicedmrw
  10. 启动监视器：systemctl start DmMonitorServiceconfirm

 

Forrest Chan
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
DM数据守护集群搭建
weixin_48588449的博客
08-21 236
1.安装数据库，参考https://blog.csdn.net/weixin_48588449/article/details/107786517 数据库安装完成后，DM7版本备库可以完全拷贝主库的数据库实例；DM8版本不能拷贝，需要做备份恢复； 这里我搭建的是DM的数据守护： 备份恢复操作，已经整理在下面了，可以参考： 备份数据库： 脱机备份、还原： 1. 正常关闭数据库 2. 进行脱机备份 ./dmrman CTLSTMT="BACKUP DATABASE '/dm8/data/DAMENG/dm
达梦数据库——异常崩溃(core)分析处理
weixin_46458436的博客
04-18 400
达梦数据库异常宕机core文件分析
dm7数据守护2.0搭建
qq_33674508的博客
05-19 183
环境准备： 1.准备三台服务器，分别为主机，备机，监视器（监视器不用初始化实例），三台服务器都已经安装了dm7 2.相关服务器ip和相关的端口配置如下： 数据准备： 配置数据守护之前，必须先同步主备机数据，确保两者保持完全一致。主数据库可以是 新初始化的实例，也可以是正在生产、使用中的实例。可以通过两种方式初始化同步主备机数据：数据文件拷贝以及备份还原方式。 我这里采用数据脱机备份还原： 1.正常关闭主库，备库； 2.备份主库(备份前要配置主库归档)： ./dmbackup TYPE=FULL INI_P
Windows下达梦数据守护搭建
a19950928的博客
06-01 876
Windows下达梦数据守护搭建 一、 搭建环境： 三台虚拟机搭建达梦数据守护，环境如下： 服务器 IP地址 操作系统 系统用户名 数据库版本 数据库实例名 主库 192.168.139.141 Windows Server 2008 administrator dm7 DMSVR01 备库 192.168.139.142 Windows Server 2008 administrator dm7 DMSVR02 监视器 192.168.139.143 Windows Server
达梦（dm8）数据数据主备（dw）守护集群安装部署
weixin_49739541的博客
01-30 877
所需空间: 1869M请选择安装目录 [/home/dmdba/dm/dmdbms]:
达梦8主备集群搭建部署
07-22
达梦8主备集群搭建部署是指在两个节点上安装达梦数据库软件，并配置主备数据库实例，实现数据备份和还原，最后配置集群文件来实现高可用性。下面是达梦8主备集群搭建部署的详细步骤和知识点： 一、安装数据库软件 ...
DM8数据守护与读写分离集群V4.0
最新发布
05-07
DM8数据守护与读写分离集群V4.0
达梦数据库通过DEM工具搭建主备集群
10-09
达梦数据库通过DEM工具搭建主备集群 达梦数据库是中国自主知识产权的关系数据库管理系统，DEM 是达梦数据库的管理工具。通过 DEM 工具，可以实现达梦数据库的主备集群搭建，实现数据库的高可用性和灾难恢复。 达梦...
JOE_达梦dm数据守护配置
qq_18743743的博客
02-27 263
配置方案： 只配置主库和最多8个实时备库 1、环境说明： 1.1主库ip地址： 10.211.55.3 10.0.0.3 备库ip地址： 10.211.55.11 10.211.55.4 1.2主备库端口规划： INSTANCE_NAME PORT_NUMDW_PORT MAL_HOST...
达梦数据库两节点主备守护集群搭建详细过程
小杨童鞋学习日记
01-26 1266
DM 数据守护（Data Watch）是一种集成化的高可用、高性能数据库解决方案，是数据库异地容灾的首选方案。通过部署 DM 数据守护，可以在硬件故障（如磁盘损坏）、自然灾害（地震、火灾）等极端情况下，避免数据损坏、丢失，保障数据安全，并且可以快速恢复数据库服务，满足用户不间断提供数据库服务的要求。与常规的数据库备份（Backup）、还原（Restore）技术相比，数据守护可以更快地恢复数据库服务。
DM集群搭建与数据迁移
JABX_doudou的博客
07-27 191
DM数据守护系统主要由主库、备库、Redo日志、Redo日志传输、Redo日志重演、守护进程（dmwatcher）、监视器（dmmonitor）组成。DM数据守护实现原理：将主库（生产库）产生的Redo日志传输到备库，备库接收并重新应用Redo日志，从而实现备库与主库的数据同步。DM数据守护的核心思想是监控数据库状态，获取主、备库数据同步情况，为Redo日志传输与重演过程中出现的各种异常情况提供一系列的解决方案。DM数据守护可以配置成实时主备、MPP主备、读写分离、DSC守护。
【达梦数据守护搭建全过程及碰到的问题】
qq_40333017的博客
10-18 594
达梦数据守护搭建全过程及碰到的问题
DM数据库
sjj51812580的博客
04-24 1763
简介 达梦数据库是达梦公司推出的具有完全自主知识产权的高性能数据库管理系统，简称DM。达梦数据库管理系统的最新版本是8.0版本，简称DM8。 1、CPU架构 目前DM数据库产品，支持X86、飞腾、龙芯、鲲鹏、海光、兆芯等国内外，常见的CPU架构 2、操作系统版本 DM产品支持，在Windows、Centos、麒麟等，常用操作系统中进行安装部署 3、目录与存储规划 服务器存储规划，在生产环境中，非常重要 错误规划，将会导致后期磁盘空间遇到瓶颈，需要进行数据迁移等工作； 条件允许的情况
主备集群规范化部署
你学废了么的博客
03-15 689
自动切换把归档类型改为REALTIME 本章节主要介绍在生产环境中（Linux 系统）规范化部署主备集群。 服务器硬件需求 按实际业务需求，选择合适的服务器，准备 3 台服务器，一台主库服务器，一台备库服务器，一台监视器服务器，服务器参数建议如下： 硬件 要求 物理内存 >=16 GB 交换区 Swap 空间>=物理内存 /tmp大小 > 1000 MB 网络 物理机器需要 4 个网卡，2 个 public 网卡做 band，2 个 private 网卡做 band 磁盘 根据实际应用系.
达梦数据库 安装及初始化实例
热门推荐
jl_li的博客
09-29 1万+
以Centos7.3为例，采用命令行方式安装。 1. 达梦数据库系统，按照不小于以下标准定义空间大小： 文件系统 空间大小 用途 备注 /db/dmdbms 5GB 存储达梦数据库软件 安装完成后占用空间约1GB /dbdata 100GB 存储达梦数据库数据文件 根据实际用户数据量 /arch 100GB 存储达梦...
使用docker搭建dm主备集群
05-24
首先，需要安装Docker和Docker Compose。然后按照以下步骤操作： 1. 创建两个文件夹，分别为dm-master和dm-worker，用于存放主节点和从节点的配置文件。 2. 在dm-master文件夹中创建docker-compose.yml文件，并添加以下内容： ``` version: '3' services: dm-master: image: pingcap/dm:latest container_name: dm-master volumes: - ./dm-master:/etc/dm-master ports: - "8261:8261" - "8291:8291" command: dm-master -config /etc/dm-master/dm-master.toml ``` 3. 在dm-master文件夹中创建dm-master.toml配置文件，并添加以下内容： ``` [log.file] filename = "/var/log/dm-master.log" [log.level] value = "info" [server] addr = ":8261" advertise-addr = "master_ip:8261" data-dir = "/data/dm-master" name = "dm-master" [dumpling-worker] worker-addr = "worker_ip:8262" password = "password" [security] ssl-ca = "/etc/dm-master/ca.pem" ssl-cert = "/etc/dm-master/server-cert.pem" ssl-key = "/etc/dm-master/server-key.pem" ``` 注意将master_ip和worker_ip替换为实际的IP地址，并设置密码。 4. 在dm-worker文件夹中创建docker-compose.yml文件，并添加以下内容： ``` version: '3' services: dm-worker: image: pingcap/dm:latest container_name: dm-worker volumes: - ./dm-worker:/etc/dm-worker ports: - "8262:8262" command: dm-worker -config /etc/dm-worker/dm-worker.toml ``` 5. 在dm-worker文件夹中创建dm-worker.toml配置文件，并添加以下内容： ``` [log.file] filename = "/var/log/dm-worker.log" [log.level] value = "info" [server] addr = ":8262" advertise-addr = "worker_ip:8262" data-dir = "/data/dm-worker" name = "dm-worker" [worker] addr = ":8262" password = "password" [security] ssl-ca = "/etc/dm-worker/ca.pem" ssl-cert = "/etc/dm-worker/server-cert.pem" ssl-key = "/etc/dm-worker/server-key.pem" ``` 注意将worker_ip替换为实际的IP地址，并设置密码。 6. 在dm-master文件夹中创建ca.pem、server-cert.pem和server-key.pem证书文件，并将它们复制到dm-worker文件夹中。 7. 最后，在终端中进入dm-master文件夹，并执行以下命令启动主节点： ``` docker-compose up -d ``` 8. 在终端中进入dm-worker文件夹，并执行以下命令启动从节点： ``` docker-compose up -d ``` 现在，您已经成功地使用Docker搭建了DM主备集群。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值