前言
实时主备
达梦数据库实时主备的原理是主库修改数据产生的REDO日志, 通过实时归档机制, 在写入本地REDO之前发送给备库,备库接收到REDO后重新应用REDO日志来保持与主库数据同步,当主库故障时, 备库再将所有REOD日志应用完成后,就切换为主库对外提供服务。异步备库
在实际应用中,如果数据库规模很大,并且对数据的实时性要求不是很严格,则可以配置多个异步备库用于分担统计报表等任务。异步备库支持多源配置,目的是在实时或即时主备环境中,当主备库切换或者主库故障时,备库接管以后可以继续向同一个异步备库同步数据,因此 如果主库配置了异步备库,在所有备库上也需要配置相同的异步备库,备库只有在切换为主库时才会向其同步数据。
一、环境准备
1.1 实时主备集群
首先搭建好实时主备集群,在此基础进行改动,增加异步备库。
详情可以参考博客:
1.2 IP地址规划
主库 IP: 192.168.10.112 实例名 its1 数据库名称 its
实时备库 IP: 192.168.10.113 实例名 its2 数据库名称 its
异步备库 IP: 192.168.10.114 实例名 its3 数据库名称 its
1.3 端口规划
MAL_INST_PORT 5236 数据库实例监听端口
MAL_PORT 61141 MAL 系统监听 TCP 连接的端口
MAL_DW_PORT 33141 实例监听守护进程 TCP 连接的端口
MAL_INST_DW_PORT 52141 实例本地的守护进程监听 TCP 连接的端口
1.4 目录规划
数据库软件安装目录 /home/dmdba/dmdbms
实例安装目录 /home/dmdba/dmdata
归档日志存放目录 /home/dmdba/dmarch
备份文件存放目录 /home/dmdba/dmbak
1.5 前期准备
用户与组
DM 数据库不应该使用 root 用户安装和维护。需要在安装之前为 DM 数据库创建一个专用的系统用户 (dmdba) 和用户组(dinstall),并设置系统用户dmdba的密码。
# 创建用户组
groupadd dinstall
# 创建用户
useradd -g dinstall -m -d /home/dmdba -s /bin/bash dmdba
# 设置密码
passwd dmdba
关闭防火墙
查看防火墙状态,如果显示为active,需要关闭防火墙,禁用则开机不启动防火墙。
systemctl status firewalld.service
systemctl stop firewalld.service
systemctl disable firewalld.service
关闭SELinux
查看是否开启了SELinux,如果显示为Enforcing,需要改为Disabled,再重启系统使配置生效。
getenforce
vi /etc/selinux/config
#进入文件后修改 SELINUX = disabled
#保存退出文件
reboot
二、数据库软件安装
1.命令行形式安装
异步备库:
进入达梦软件挂载目录,执行./DMInstall.bin -i 命令
2.初始化数据库实例
异步备库:使用 dmdba 用户,执行以下命令
[dmdba@k8s114 ~]$ cd /home/dmdba/dmdbms/bin
[dmdba@k8s114 bin]$ ./dminit PATH=/home/dmdba/dmdata db_name=its instance_name=its3
3.前台启动实例后关闭
异步备库:
[dmdba@k8s114 bin]$ ./dmserver /home/dmdba/dmdata/its/dm.ini
4.主库进行脱机备份
在主库进行脱机备份,然后把备份文件传输到实时备库和异步备库,然后分别在两个备库通过drmman工具进行还原和恢复,达成初始服务器环境数据的完整性和一致性。
脱机备份前要关闭数据库实例,否则备份会出错
[dmdba@k8s112 bin]$ ./dmrman
dmrman V8
RMAN> BACKUP DATABASE '/home/dmdba/dmdata/its/dm.ini' FULL BACKUPSET '/home/dmdba/dmbak/full_database';
5.实时备库与异步备库进行数据恢复
1、主库复制备份文件到实时备库与异步备库
[dmdba@k8s112 bin]$ scp -r /home/dmdba/dmbak/full_database
192.168.10.113:/home/dmdba/dmbak/
[dmdba@k8s112 bin]$ scp -r /home/dmdba/dmbak/full_database
192.168.10.114:/home/dmdba/dmbak/
注意实时备库与异步备库的备份的所属用户和分组,如果用户为root,备份恢复时会出现权限问题。
修改所属用户和分组:
chown -R dmdba:dinstall /home/dmdba/dmbak
2、实时备库与异步备库进行恢复
[dmdba@k8s113 bin]$ ./dmrman
dmrman V8
RMAN> RESTORE DATABASE '/home/dmdba/dmdata/its/dm.ini' FROM BACKUPSET '/home/dmdba/dmbak/full_database';
RMAN> RECOVER DATABASE '/home/dmdba/dmdata/its/dm.ini' FROM BACKUPSET '/home/dmdba/dmbak/full_database';
RMAN> RECOVER DATABASE '/home/dmdba/dmdata/its/dm.ini' UPDATE DB_MAGIC;
[dmdba@k8s114 bin]$ ./dmrman
dmrman V8
RMAN> RESTORE DATABASE '/home/dmdba/dmdata/its/dm.ini' FROM BACKUPSET '/home/dmdba/dmbak/full_database';
RMAN> RECOVER DATABASE '/home/dmdba/dmdata/its/dm.ini' FROM BACKUPSET '/home/dmdba/dmbak/full_database';
RMAN> RECOVER DATABASE '/home/dmdba/dmdata/its/dm.ini' UPDATE DB_MAGIC;
三、配置文件设置
1.实例配置文件 dm.ini
使用 dmdba 用户,执行以下命令,分别修改相应参数值。
vi /home/dmdba/dmdata/its/dm.ini
主库:在配置 dm.ini 的基础上,打开定时器配置,其他配置不变
TIMER_INI = 1 #打开定时器配置,除异步备库外的主备库需要
实时备库: 在配置 dm.ini 的基础上,打开定时器配置,其他配置不变
TIMER_INI = 1 #打开定时器配置,除异步备库外的主备库需要
异步备库: 修改相应参数值。
INSTANCE_NAME = its3
MAL_INI = 1
ARCH_INI = 1
ALTER_MODE_STATUS = 0
ENABLE_OFFLINE_TS = 2
2.归档配置文件 dmarch.ini
使用 dmdba 用户,执行命令,添加内容。
vi /home/dmdba/dmdata/its/dmarch.ini
主库: 在配置 dmarch.ini 的基础上,增加异步归档的配置项
[ARCHIVE_ASYNC]
ARCH_TYPE = ASYNC #异步归档类型
ARCH_DEST = its3 #异步归档目标实例名(主库侧填写异步备库实例名)
ARCH_TIMER_NAME = RT_TIMER #定时器名称,和 dmtimer.ini 中的名称一致
实时归档只允许配置一个,即时归档可以配置1-8个,异步归档可以配置1-8个。
实时备库: 在配置 dmarch.ini 的基础上,增加异步归档的配置项
[ARCHIVE_ASYNC]
ARCH_TYPE = ASYNC #异步归档类型
ARCH_DEST = its3 #异步归档目标实例名(主库侧填写异步备库实例名)
ARCH_TIMER_NAME = RT_TIMER #定时器名称,和 dmtimer.ini 中的名称一致
实时备库也需要配置异步归档,这样切换主备后,异步备库仍然可以使用。
异步备库:
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL
ARCH_DEST = /home/dmdba/dmarch
ARCH_FILE_SIZE = 128
ARCH_SPACE_LIMIT = 0
异步备库只需要配置本地归档即可。
3.MAL系统配置文件 dmmal.ini
使用 dmdba 用户,执行以下命令:
vi /home/dmdba/dmdata/its/dmmal.ini
主库、实时备库、异步备库: 在配置 dmmal.ini 的基础上,增加异步备库的 MAL 配置项,注意修改实例名、IP和端口.
主库、实时备库、异步备库的文件内容都要相同。
MAL_CHECK_INTERVAL = 5 # MAL链路检测时间间隔
MAL_CONN_FAIL_INTERVAL = 5 # 判定 MAL链路断开的时间
[MAL_INST1]
MAL_INST_NAME = its1 #与 dm.ini中的 INSTANCE_NAME一致
MAL_HOST = 192.168.10.112 # MAL系统监听 TCP 内部网络 IP
MAL_PORT = 61141 # MAL系统监听 TCP连接的端口
MAL_INST_HOST = 192.168.10.112 #实例的对外服务 IP地址
MAL_INST_PORT = 5236 #与 dm.ini中的 PORT_NUM一致
MAL_DW_PORT = 52141 #实例对应的守护进程监听 TCP 端口
MAL_INST_DW_PORT = 33141
[MAL_INST2]
MAL_INST_NAME = its2 #与 dm.ini中的 INSTANCE_NAME 一致
MAL_HOST = 192.168.10.113 # MAL系统监听 TCP内部网络 IP
MAL_PORT = 61141 # MAL系统监听 TCP连接的端口
MAL_INST_HOST = 192.168.10.113 #实例的对外服务 IP地址
MAL_INST_PORT = 5236 #与 dm.ini中的 PORT_NUM一致
MAL_DW_PORT = 52141 #实例对应的守护进程监听 TCP端口
MAL_INST_DW_PORT = 33141
[MAL_INST3]
MAL_INST_NAME = its3
MAL_HOST = 192.168.10.114
MAL_PORT = 61141
MAL_INST_HOST = 192.168.10.114
MAL_INST_PORT = 5236
MAL_DW_PORT = 52141
MAL_INST_DW_PORT = 33141
4.守护进程配置文件 dmwatcher.ini
使用 dmdba 用户,执行以下命令:
vi /home/dmdba/dmdata/its/dmwatcher.ini
主库、实时备库: (不需要改动)
异步备库: 新建文件 dmwatcher.ini
[GRP_RW]
DW_TYPE = LOCAL #本地守护类型
DW_MODE = MANUAL #手动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 453331 #守护系统唯一 OGUID 值
INST_INI = /home/dmdba/dmdata/its/dm.ini # dm.ini 配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /home/dmdba/dmdbms/bin/dmserver #命令行方式启动
注意组名和 OGUID 要与主库、实时备库一致。
异步备库不具备故障自动切换等功能,DW_MODE 配置并不起作用,此处配置为 MANUAL 即可。
5.定时器配置文件 dmtimer.ini
在实例目录下新建文件 dmtimer.ini,使用 dmdba 用户,执行以下命令:
vi /home/dmdba/dmdata/its/dmtimer.ini
用于定时触发实例发送归档日志到异步备库。
主库、实时备库:
[RT_TIMER] #和 dmarch.ini 中的 ARCH_TIMER_NAME 一致
TYPE = 2
FREQ_MONTH_WEEK_INTERVAL = 1
FREQ_SUB_INTERVAL = 0
FREQ_MINUTE_INTERVAL = 0
START_TIME = 16:00:00
END_TIME = 16:01:00
DURING_START_DATE = 2022-7-26 16:00:00
DURING_END_DATE = 9999-12-31 23:59:59
NO_END_DATE_FLAG = 1
DESCRIBE = RT_TIMER
IS_VALID = 1
此处定时器配置为每天 16:00:00 触发主库和实时备库发送归档日志到异步备库,起始日期时间是 2022-07-26 的 16:00 。具体可以根据实际情况再做调整。
异步备库: 不需要配置。
6.监视器配置文件 dmmonitor.ini
集群任意节点(一般在备库),配置监视器配置文件 dmmonitor.ini。
本文配置在实时备库服务器上。
实时备库: 在主备集群监视器的配置基础上,需要增加异步备库守护进程的“ip:port”信息,其他配置不需要改动
vi /home/dmdba/dmdata/its/dmmonitor.ini
添加以下内容:
MON_DW_IP = 192.168.10.114:52141 #IP 对应 dmmal.ini 中的 MAL_HOST,PORT 对应 dmmal.ini 中的 MAL_DW_PORT
四、启动主备集群
1.启动数据库实例
使用 dmdba 用户,到数据库安装目录的 bin 下执行以下命令。(主库、实时备库、异步备库都执行)
./dmserver /home/dmdba/dmdata/its/dm.ini mount
另外开一个新的终端,使用 disql 工具连接数据库。
主库:
cd /home/dmdba/dmdbms/bin
./disql SYSDBA/SYSDBA
SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL> sp_set_oguid(453331); #修改 oguid
SQL> alter database primary; #修改为 primary 模式
SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);
实时备库、异步备库:
cd /home/dmdba/dmdbms/bin
./disql SYSDBA/SYSDBA
SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL> sp_set_oguid(453331); #修改 oguid
SQL> alter database standby; #修改为 standby 模式
SQL> SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);
2.启动守护进程
dmdba 用户下,到数据库安装目录的 bin 下执行。(主库、实时备库、异步备库都执行) 守护进程启动后,会将 Mount 的实例 Open。
./dmwatcher /home/dmdba/dmdata/its/dmwatcher.ini
3.启动监视器
dmdba 用户下,到数据库安装目录的 bin 下执行。
实时备库:
cd /home/dmdba/dmdbms/bin
./dmmonitor /home/dmdba/dmdata/dmrw/dmmonitor.ini
五、验证数据同步
1.主库和实时备库数据同步
主库:使用 disql 客户端登录,创建测试表,插入数据。
./disql SYSDBA/SYSDBA
SQL> create table test(id int, name varchar2(20));
SQL> insert into test values (1, 'one');
SQL> select * from test;
SQL> commit;
实时备库:使用 disql 客户端登录,查询测试表验证。
./disql SYSDBA/SYSDBA
SQL> select * from test;
如果主库插入/更改数据后未提交(commit),在备库查询时,仍然会是未插入/更改之前的数据。直到主库提交后,才会使主备库数据同步,此时再次查询备库的表数据,两边数据一致。
2.异步备库定时同步数据
1.查看主库、实时备库设置的dmtimer.ini,定时器设置的时间是:16:00:00。
cat /home/dmdba/dmdata/its/dmtimer.ini
异步备库:使用 disql 客户端登录,查询测试表验证。( 16:00 之后)
./disql SYSDBA/SYSDBA
SQL> select * from test;
表格已经可以查询到了,说明此时主库已经发送过归档日志到异步备库,此时异步备库的数据同步了今日 16:00 之前的主库数据。
监视器: 输入 show arch send info 命令查看异步备库的归档日志接收信息。
show arch send info its3