数据守护集群部署环境
业务 IP | 192.168.92.18 | 192.168.92.15 |
心跳 IP | 192.168.92.19 | 192.168.92.16 |
实例名 | GRP1_RT_01 | GRP1_RT_02 |
实例端口 | 5236 | 5236 |
MAL 端口 | 5336 | 5336 |
MAL 守护进程端口 | 5436 | 5436 |
守护进程端口 | 5536 | 5536 |
OGUID | 45331 | 45331 |
守护组 | GRP1 | GRP1 |
安装目录 | /usr/local/dmdbms | /usr/local/dmdbms |
实例目录 | /usr/local/dmdata/data/ | /usr/local/dmdata/data/ |
归档上限 | 51200 | 51200 |
确认监视器 IP 为 192.168.92.15(在备机上配置确认监听器)
在各个节点上部署非确认监听器。
一、配置主节点
事先在主节点上安装DM数据库管理系统。
- 初始化实例
./dminit path=/usr/local/dmdata/data page_size=32 extent_size=32 charset=1 log_size=2048 instance_name=GRP1_RT_01
2、在前台启动服务(相对于后台注册服务启动)
[dmdba@~]$ /usr/local/dmdbms/bin/dmserver /usr/local/dmdata/data/DAMENG/dm.ini
3、登录数据库,开启归档,联机备份主库数据库,修改dm.ini文件
[dmdba@~]$ /usr/local/dmdbms/bin/disql SYSDBA/SYSDBA@192.168.92.18:5236
SQL> ALTER DATABASE MOUNT;
SQL> ALTER DATABASE ARCHIVELOG;
SQL> ALTER DATABASE ADD ARCHIVELOG 'DEST=/usr/local/dmdata/arch, TYPE=LOCAL, FILE_SIZE=1024, SPACE_LIMIT=51200';
SQL> ALTER DATABASE OPEN;
SQL> BACKUP DATABASE BACKUPSET '/dmbak/BACKUP_FILE';
注意:备份时候,可能因为dmap进程没有开启,会报错,该进程在bin目录下,可以手工开启:./dma
修改dm.ini文件:
SQL> SP_SET_PARA_VALUE (2,'PORT_NUM',5236);
SQL> SP_SET_PARA_VALUE (2,'DW_INACTIVE_INTERVAL',60);
SQL> SP_SET_PARA_VALUE (2,'ALTER_MODE_STATUS',0);
SQL> SP_SET_PARA_VALUE (2,'ENABLE_OFFLINE_TS',2);
SQL> SP_SET_PARA_VALUE (2,'MAL_INI',1);
SQL> SP_SET_PARA_VALUE (2,'RLOG_SEND_APPLY_MON',64);
4、关闭前台服务后,修改dmarch.ini文件,创建dmmal.ini文件,创建dmwatcher.ini文件。
(1)修改dm.arch.ini
vim /usr/local/dmdata/data/DAMENG/dmarch.ini
ARCH_WAIT_APPLY = 0 #0:高性能 1:事务一致
[ARCHIVE_LOCAL]
ARCH_TYPE = LOCAL #本地归档类型
ARCH_DEST = /opt/dmdbms/data/DAMENG/arch/ #本地归档存放路径
ARCH_FILE_SIZE = 1024 #单个归档大小,单位 MB
ARCH_SPACE_LIMIT = 51200 #归档上限,单位 MB
[ARCHIVE_REALTIME1]
ARCH_TYPE = REALTIME #实时归档类型
ARCH_DEST = GRP1_RT_02 #实时归档目标实例名
(2)创建dmmal.ini文件
vim /usr/local/dmdata/data/DAMENG/dmmal.ini
MAL_CHECK_INTERVAL = 10 #MAL 链路检测时间间隔
MAL_CONN_FAIL_INTERVAL = 10 #判定 MAL 链路断开的时间
MAL_TEMP_PATH = /usr/local/dmdata/data/malpath/ #临时文件目录
MAL_BUF_SIZE = 512 #单个 MAL 缓存大小,单位 MB
MAL_SYS_BUF_SIZE = 2048 #MAL 总大小限制,单位 MB
MAL_COMPRESS_LEVEL = 0 #MAL 消息压缩等级,0 表示不压缩
[MAL_INST1]
MAL_INST_NAME = GRP1_RT_01 #实例名,和 dm.ini 的 INSTANCE_NAME 一致
MAL_HOST = 192.168.92.19 #MAL 系统监听 TCP 连接的 IP 地址
MAL_PORT = 5336 #MAL 系统监听 TCP 连接的端口
MAL_INST_HOST = 192.168.92.18 #实例的对外服务 IP 地址
MAL_INST_PORT = 5236 #实例对外服务端口,和 dm.ini 的 PORT_NUM 一致
MAL_DW_PORT = 5436 #实例对应的守护进程监听 TCP 连接的端口
MAL_INST_DW_PORT = 5536 #实例监听守护进程 TCP 连接的端口
[MAL_INST2]
MAL_INST_NAME = GRP1_RT_02
MAL_HOST = 192.168.92.16
MAL_PORT = 5336
MAL_INST_HOST = 192.168.92.15
MAL_INST_PORT = 5236
MAL_DW_PORT = 5436
MAL_INST_DW_PORT = 5536
(3)创建dmwatcher.ini文件
vim /usr/local/dmdata/data/DAMENG/dmwatcher.ini
[GRP1]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #MANUAL:故障手切 AUTO:故障自切
DW_ERROR_TIME = 20 #远程守护进程故障认定时间
INST_ERROR_TIME = 20 #本地实例故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_OGUID = 45331 #守护系统唯一 OGUID 值
INST_INI = /usr/local/dmdata/data/DAMENG/dm.ini #dm.ini 文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /usr/local/dmdbms/bin/dmserver #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阈值,默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阈值,默认关闭
5、拷贝数据库备份文档到备机上。
[dmdba@~]$ scp -r /dmbak/BACKUP_FILE dmdba@192.168.92.15:/dmbak/BACKUP_FILE
6、注册dm数据库服务和监视器服务
[root@~]# /usr/local/dmdbms/script/root/dm_service_installer.sh -t dmserver -p GRP1_RT_01 -dm_ini /usr/local/dmdata/data/DAMENG/dm.ini -m mount
[root@~]# /usr/local/dmdbms/script/root/dm_service_installer.sh -t dmwatcher -p Watcher -watcher_ini /usr/local/dmdata/data/DAMENG/dmwatcher.ini
二、配置备节点
事先在备节点上安装DM数据库管理系统。
1、初始化实例
[dmdba@~]$ /usr/local/dmdbms/bin/dminit PATH=/usr/local/dmdata/data/ INSTANCE_NAME=GRP1_RT_02 PAGE_SIZE=32 EXTENT_SIZE=32 LOG_SIZE=2048
2、在备库上恢复数据库数据
[dmdba@~]$ /usr/local/dmdbms/bin/dmrman CTLSTMT="RESTORE DATABASE '/usr/local/dmdata/data/DAMENG/dm.ini' FROM BACKUPSET '/dmbak/BACKUP_FILE'"
[dmdba@~]$ /usr/local/dmdbms/bin/dmrman CTLSTMT="RECOVER DATABASE '/usr/local/dmdata/data/DAMENG/dm.ini' FROM BACKUPSET '/dmbak/BACKUP_FILE'"
[dmdba@~]$ /usr/local/dmdbms/bin/dmrman CTLSTMT="RECOVER DATABASE '/usr/local/dmdata/data/DAMENG/dm.ini' UPDATE DB_MAGIC"
3、修改dm.ini文件,dmarch.ini文件,新增dmmal.ini文件,新增dmwatcher.ini文件。
(1)替换dmarch.ini文件
[dmdba@~]$ vi /usr/local/dmdata/data/DAMENG/dmarch.ini
ARCH_WAIT_APPLY = 0 #0:高性能 1:事务一致
[ARCHIVE_LOCAL]
ARCH_TYPE = LOCAL #本地归档类型
ARCH_DEST = /usr/local/dmdata/arch/ #本地归档存放路径
ARCH_FILE_SIZE = 1024 #单个归档大小,单位 MB
ARCH_SPACE_LIMIT = 51200 #归档上限,单位 MB
[ARCHIVE_REALTIME1]
ARCH_TYPE = REALTIME #实时归档类型
ARCH_DEST = GRP1_RT_01 #实时归档目标实例名
(2)配置dm.ini文件
在 备库机器上配置备库的实例名为 GRP1_RT_02,dm.ini 参数修改如下:
INSTANCE_NAME = GRP1_RT_02
PORT_NUM = 5236 #数据库实例监听端口
DW_INACTIVE_INTERVAL = 60 #接收守护进程消息超时时间
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态/OGUID
ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间
MAL_INI = 1 #打开 MAL 系统
ARCH_INI = 1 #打开归档配置
RLOG_SEND_APPLY_MON = 64 #统计最近 64 次的日志重演信息
B 机器里 dmmal.ini、dmwatcher.ini 与 A 机器 GRP1_RT_01 的 dmmal.ini、dmwatcher.ini 相同,参照 A 机器 dmmal.ini、dmwatcher.ini 文件进行配置。
(3)配置dmmal.ini文件
[root@oracle12c DAMENG]# more dmmal.ini
MAL_CHECK_INTERVAL = 10 #MAL 链路检测时间间隔
MAL_CONN_FAIL_INTERVAL = 10 #判定 MAL 链路断开的时间
MAL_TEMP_PATH = /usr/local/dmdata/data/malpath/ #临时文件目录
MAL_BUF_SIZE = 512 #单个 MAL 缓存大小,单位 MB
MAL_SYS_BUF_SIZE = 2048 #MAL 总大小限制,单位 MB
MAL_COMPRESS_LEVEL = 0 #MAL 消息压缩等级,0 表示不压缩
[MAL_INST1]
MAL_INST_NAME = GRP1_RT_01 #实例名,和 dm.ini 的 INSTANCE_NAME 一致
MAL_HOST = 192.168.92.19 #MAL 系统监听 TCP 连接的 IP 地址
MAL_PORT = 5336 #MAL 系统监听 TCP 连接的端口
MAL_INST_HOST = 192.168.92.18 #实例的对外服务 IP 地址
MAL_INST_PORT = 5236 #实例对外服务端口,和 dm.ini 的 PORT_NUM 一致
MAL_DW_PORT = 5436 #实例对应的守护进程监听 TCP 连接的端口
MAL_INST_DW_PORT = 5536 #实例监听守护进程 TCP 连接的端口
[MAL_INST2]
MAL_INST_NAME = GRP1_RT_02
MAL_HOST = 192.168.92.16
MAL_PORT = 5336
MAL_INST_HOST = 192.168.92.15
MAL_INST_PORT = 5236
MAL_DW_PORT = 5436
MAL_INST_DW_PORT = 5536
(4)配置dmwatcher.ini文件
[root@oracle12c DAMENG]# vim dmwatcher.ini
[GRP1]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #MANUAL:故障手切 AUTO:故障自切
DW_ERROR_TIME = 20 #远程守护进程故障认定时间
INST_ERROR_TIME = 20 #本地实例故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_OGUID = 45331 #守护系统唯一 OGUID 值
INST_INI = /usr/local/dmdata/data/DAMENG/dm.ini #dm.ini 文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /usr/local/dmdbms/bin/dmserver #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阈值,默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阈值,默认关闭
(4)注册服务
[root@~]# /usr/local/dmdbms/script/root/dm_service_installer.sh -t dmserver -p GRP1_RT_02 -dm_ini /usr/local/dmdata/data/DAMENG/dm.ini -m mount
[root@~]# /usr/local/dmdbms/script/root/dm_service_installer.sh -t dmwatcher -p Watcher -watcher_ini /usr/local/dmdata/data/DAMENG/dmwatcher.ini
三、配置监视器
手动切换:集群各节点的 bin 目录中,存放非确认监视器配置文件。
自动切换:在确认监视器上(非集群节点),存放确认监视器配置文件,并注册后台自启服务。
1、在备机上配置确认监视器(注意:生产上要用独立一台机器部署)
[dmdba@~]$ vi /usr/local/dmdbms/bin/dmmonitor.ini
MON_DW_CONFIRM = 1 #0:非确认(故障手切) 1:确认(故障自切)
MON_LOG_PATH = /usr/local/dmdata/log #监视器日志文件存放路径
MON_LOG_INTERVAL = 60 #每隔 60s 定时记录系统信息到日志文件
MON_LOG_FILE_SIZE = 512 #单个日志大小,单位 MB
MON_LOG_SPACE_LIMIT = 2048 #日志上限,单位 MB
[GRP1]
MON_INST_OGUID = 45331 #组 GRP1 的唯一 OGUID 值
##以下配置为监视器到组GRP1的守护进程的连接信息,以“IP:PORT”的形式配置
MON_DW_IP = 192.168.92.19:5436 #IP 对应 MAL_HOST,PORT 对应 MAL_DW_PORT
MON_DW_IP = 192.168.92.16:5436
2、在各个节点上配置非确认监视器
在配置监视器时,一般配置好确认监视器后,建议再配置一个非确认监视器的配置文件,在主备发生切换时,可以通过前台的方式启动非确认监视器进行手动切换。非确认监视器是通过将监视器配置文件中 MON_DW_CONFIRM 参数值修改为 0 来实现。
#在各个节点上配置非确认监视器
[dmdba@~]$ vi /usr/local/dmdbms/bin/dmmonitor_manual.ini
MON_DW_CONFIRM = 0 #0:非确认(故障手切) 1:确认(故障自切)
MON_LOG_PATH = /usr/local/dmdata/log_manual #监视器日志文件存放路径
MON_LOG_INTERVAL = 60 #每隔 60s 定时记录系统信息到日志文件
MON_LOG_FILE_SIZE = 512 #单个日志大小,单位 MB
MON_LOG_SPACE_LIMIT = 2048 #日志上限,单位 MB
[GRP1]
MON_INST_OGUID = 45331 #组 GRP1 的唯一 OGUID 值
MON_DW_IP = 192.168.92.19:5436 #IP 对应 MAL_HOST,PORT 对应 MAL_DW_PORT
MON_DW_IP = 192.168.92.16:5436
3、注册确认监视器
[root@~]# /usr/local/dmdbms/script/root/dm_service_installer.sh -t dmmonitor -p Monitor -monitor_ini /usr/local/dmdbms/bin/dmmonitor.ini
四、启动服务和查看信息
注意:启动服务要用dmdba用户!!
1、启动数据库服务并修改参数
##主库
[dmdba@~]$ /usr/local/dmdbms/bin/DmServiceGRP1_RT_01 start
或者 service DmServiceGRP1_RT_01 start
[dmdba@~]$ /usr/local/dmdbms/bin/disql SYSDBA/SYSDBA@192.168.92.18:5236
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL> SP_SET_OGUID(45331);
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);
SQL> ALTER DATABASE PRIMARY;
##备库
[dmdba@~]$ /usr/local/dmdbms/bin/DmServiceGRP1_RT_02 start
或者 service DmServiceGRP1_RT_01 start
[dmdba@~]$ /usr/local/dmdbms/bin/disql SYSDBA/SYSDBA@192.168.92.15:5236
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL> SP_SET_OGUID(45331);
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);
SQL> ALTER DATABASE STANDBY;
2、启动守护进程
##启动各个主备库上的守护进程:
[dmdba@~]$ /usr/local/dmdbms/bin/DmWatcherServiceWatcher start
或者 service DmWatcherServiceWatcher start
3、启动确认监视器(备库上)
##后台启动(确认监视器)
[dmdba@~]$ /usr/local/dmdbms/bin/DmMonitorServiceMonitor start
或者 service DmMonitorServiceMonitor start
至此一主一备的实时数据守护系统搭建完毕,在搭建步骤和各项配置都正确的情况下,在监视器上执行 show 命令,可以监控到所有实例都处于 Open 状态,所有守护进程也都处于 Open 状态,即为正常运行状态。
五、验证集群数据同步
1、在主库上建表tab01和tab02,并插入数据
2、在备库上验证数据是否同步
经验证,备库数据是同步的!
社区地址:https://eco.dameng.com