DM数据库搭建实时主备
1.环境准备
准备两台装有DM数据库的机器DM_P和DM_S1,以DM_P上初始化的实例为主库,DM_S1上初始化的实例为备库。
为两台机器配置IP,这里可以选择配置两块网卡,一块连接内部网络,一块连接外部交换机;也可以只使用一块网卡,配置IP连接外部交换机。
2.数据准备
在DM_P上初始化库到DM安装目录下的data文件夹:
./dminit path=/dameng/dmdbms/data
使用root用户到/dm/DM/script/root目录下注册数据库实例服务:
[root@db1 root]# ./dm_service_installer.sh -t dmserver -dm_ini /dm/DM/data/DAMENG/dm.ini -p DMSERVER
使用dmdba用户在DM安装目录bin下启动数据库实例服务:
[dmdba@db1 bin]$ ./DmServiceDMSERVER start
进行联机备份:
dmdba用户在DM安装目录bin下使用disql命令连接指定数据库,对主库进行联机备份操作:
开启并配置归档:
SQL> alter database mount;
SQL> alter database add archivelog 'DEST=/dameng/dmdbms/data/DAMENG/arch,type=local,file_size=128,space_limit=10240';
SQL> alter database archivelog;
SQL> alter database open;
联机备份数据库:
SQL>backup database backupset'/dameng/dmdbms/data/BACKUP_FILE_01';
拷贝备份文件到备库所在机器DM_S1,使用同样的方法初始化数据库实例,
在DM_S1上关闭数据库实例服务后使用dmrman执行脱机数据库还原与恢复
restore database '/dameng/dmdbms/data/DAMENG/dm.ini' from backupset
'/dameng/dmdbms/data/BACKUP_FILE_01'
执行恢复数据库:
recover database '/dameng/dmdbms/data/DAMENG/dm.ini' from backupset '/dameng/dmdbms/data/BACKUP_FILE_01'
更新数据库DB_MAGIC,这一步非常重要,在执行全库备份还原的时候,如果不执行这一步,将造成数据库实例服务无法启动:
recover database '/dameng/dmdbms/data/DAMENG/dm.ini' update DB_MAGIC
3.配置主库GRP1_RT_01
在配置这些.ini文件时需要注意,只有dm.ini文件是在数据库创建时就自动生成的,只用打开此文件对其中的内容进行修改即可;其他如dmmal.ini,dmarch.ini,dmwatchr.ini等,是需要用户自己新建文件,向其中写入内容的。
3.1配置dm.ini
在 DW_P 机器上配置主库的实例名为 GRP1_RT_01,dm.ini 参数修改如下:
#实例名,建议使用组名_守护环境_序号的命名方式,总长度不能超过 16
INSTANCE_NAME = GRP1_RT_01
PORT_NUM = 5236 #数据库实例监听端口
DW_INACTIVE_INTERVAL = 60 #接收守护进程消息超时时间
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态/OGUID
ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间
MAL_INI = 1 #打开 MAL 系统
ARCH_INI = 1 #打开归档配置
RLOG_SEND_APPLY_MON = 64 #统计最近 64 次的日志发送信息
可以通过root用户执行vi /dameng/dmdbms/data/DAMENG/dm.ini进行参数修改,修改后需要重启数据库实例服务才能使修改后的参数生效;也可以用另一种方法,开启命令行工具disql连接数据库,使用DM数据库提供的SP_SET_PARA_VALUE、SP_SET_PARA_STRING_VALUE等函数进行修改,具体用法可见DM8_SQL语言使用手册附录3.
3.2配置dmmal.ini
配置 MAL 系统,各主备库的 dmmal.ini 配置必须完全一致,MAL_HOST 使用内部网络 IP,MAL_PORT 与 dm.ini 中 PORT_NUM 使用不同的没有被占用的端口值,MAL_DW_PORT 是各实例对应的守护进程之间,以及守护进程和监视器之间的通信端口,配置如下:
MAL_CHECK_INTERVAL = 5 #MAL 链路检测时间间隔
MAL_CONN_FAIL_INTERVAL = 5 #判定 MAL 链路断开的时间
[MAL_INST1]
MAL_INST_NAME = GRP1_RT_01 #实例名,和 dm.ini 中的 INSTANCE_NAME 一致
MAL_HOST = 192.168.71.131 #MAL 系统监听 TCP 连接的 IP 地址
MAL_PORT = 61141 #MAL 系统监听 TCP 连接的端口
MAL_INST_HOST = 192.168.71.131 #实例的对外服务 IP 地址
MAL_INST_PORT =5236 #实例的对外服务端口,和 dm.ini 中的 PORT_NUM 一致
MAL_DW_PORT = 52141 #实例本地的守护进程监听 TCP 连接的端口
MAL_INST_DW_PORT = 33141 #实例监听守护进程 TCP 连接的端口
[MAL_INST2]
MAL_INST_NAME = GRP1_RT_02
MAL_HOST = 192.168.71.132
MAL_PORT = 61142
MAL_INST_HOST = 192.168.71.132
MAL_INST_PORT = 5236
MAL_DW_PORT = 52142
MAL_INST_DW_PORT = 33142
3.3配置dmarch.ini
修改 dmarch.ini,配置本地归档和实时归档。
除了本地归档外,其他归档配置项中的 ARCH_DEST 表示实例是 Primary 模式时,需要同步归档数据的目标实例名。
[ARCHIVE_REALTIME]
ARCH_TYPE = REALTIME #实时归档类型
ARCH_DEST = GRP1_RT_02 #实时归档目标实例名
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL #本地归档类型
ARCH_DEST = /dameng/dmdbms/data/DAMENG/arch #本地归档文件存放路径
ARCH_FILE_SIZE = 1024 #单位 Mb,本地单个归档文件最大值
ARCH_SPACE_LIMIT = 0 #单位 Mb,0 表示无限制,范围 1024~4294967294M
3.4配置dmwatcher.ini
修改 dmwatcher.ini 配置守护进程,配置为全局守护类型,使用自动切换模式。
[GRP1]
DW_TYPE = GLOBAL #全局守护类型
DW_MODE = AUTO #自动切换模式
DW_ERROR_TIME = 10 #远程守护进程故障认定时间
INST_RECOVER_TIME = 60 #主库守护进程启动恢复的间隔时间
INST_ERROR_TIME = 10 #本地实例故障认定时间
INST_OGUID = 453331 #守护系统唯一 OGUID 值
INST_INI = /dm/data/DAMENG/dm.ini #dm.ini 配置文件路径
INST_AUTO_RESTART = 1 #打开实例的自动启动功能
INST_STARTUP_CMD = /dameng/dmdbms/bin/dmserver #命令行方式启动
RLOG_SEND_THRESHOLD = 0 #指定主库发送日志到备库的时间阈值,默认关闭
RLOG_APPLY_THRESHOLD = 0 #指定备库重演日志的时间阈值,默认关闭
3.5设置OGUID
将数据库实例关闭,以 Mount 方式启动主库
[dmdba@localhost bin]$ ./dmserver /dameng/dmdbms/data/DAMENG/dm.ini mount
启动后显示如图:
启动命令行工具 DIsql,登录主库设置 OGUID 值:
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL>sp_set_oguid(453331);
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);
3.6修改数据库模式
启动命令行工具 DIsql,登录主库修改数据库为 Primary 模式:
SQL>alter database primary;
4.配置备库GRP1_RT_02
4.1配置dm.ini
在 DW_S1 机器上配置备库的实例名为 GRP1_RT_02,dm.ini 参数修改如下,修改方法与主库配置dm.ini时的方法一样:
#实例名,建议使用―组名_守护环境_序号‖的命名方式,总长度不能超过 16
INSTANCE_NAME = GRP1_RT_02
PORT_NUM = 5236 #数据库实例监听端口
DW_INACTIVE_INTERVAL = 60 #接收守护进程消息超时时间
ALTER_MODE_STATUS = 0 #不允许手工方式修改实例模式/状态/OGUID
ENABLE_OFFLINE_TS = 2 #不允许备库 OFFLINE 表空间
MAL_INI = 1 #打开 MAL 系统
ARCH_INI = 1 #打开归档配置
RLOG_SEND_APPLY_MON = 64 #统计最近 64 次的日志重演信息
4.2配置dmmal.ini,dmarch.ini,dmwatcher.ini
备库配置与主库类似,可从主库所在的机器上将dmmal.ini,dmarch.ini,
dmwatcher.ini三个文件拷贝到备库所在的机器上,只需要对dmarch.ini中的实时归档目标实例名进行修改即可:
[ARCHIVE_REALTIME]
ARCH_TYPE = REALTIME #实时归档类型
ARCH_DEST = GRP1_RT_01 #实时归档目标实例名
4.3启动备库,设置OGUID
设置方式与主库也是一样的:
以 Mount 方式启动备库
./dmserver /dameng/dmdbms/data/DAMENG/dm.ini mount
启动命令行工具 DIsql,登录主库设置 OGUID 值:
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 1);
SQL>sp_set_oguid(453331);
SQL>SP_SET_PARA_VALUE(1, 'ALTER_MODE_STATUS', 0);
5.配置监视器
监视器在主机、备机或者第三台机器上配置都行,最好在第三台机器上配置。
修改 dmmonitor.ini 配置确认监视器,其中 MON_DW_IP 中的 IP 和 PORT 和
dmmal.ini 中的 MAL_HOST 和 MAL_DW_PORT 配置项保持一致:
MON_DW_CONFIRM = 1 #确认监视器模式
MON_LOG_PATH = /dameng/dmdbms/data/log #监视器日志文件存放路径
MON_LOG_INTERVAL = 60 #每隔 60s 定时记录系统信息到日志文件
MON_LOG_FILE_SIZE = 32 #每个日志文件最大 32M
MON_LOG_SPACE_LIMIT = 0 #不限定日志文件总占用空间
[GRP1]
MON_INST_OGUID = 453331 #组 GRP1 的唯一 OGUID 值 #以下配置为监视器到组 GRP1 的守
护进程的连接信息,以―IP:PORT‖的形式配置
#IP 对应 dmmal.ini 中的 MAL_HOST,PORT 对应 dmmal.ini 中的 MAL_DW_PORT
MON_DW_IP = 192.168.71.131:52141
MON_DW_IP = 192.168.71.132:52142
6.启动守护进程
启动各个主备库上的守护进程:
./dmwatcher /dameng/dmdbms/data/DAMENG/dmwatcher.ini
7.启动监视器
[dmdba@localhost bin]$ ./dmmonitor /dameng/dmdbms/data/DAMENG/dmmonitor.ini
到此就完成了DM数据库实时主备的搭建。
总结
1.搭建实时主备之前要测试主库与备库所在的机器是否能够互通,例如使用DIsql指定另一台机器的IP地址和数据库实例端口,测试是否可以进行连通,可以连通才进行实时主备的搭建;若不能连通,则需要检查防火墙和网络情况,可将防火墙关闭后重试。
2.要注意主库和备库的一致性,通过备份还原将备库与主库统一,之后在搭建好实时主备之前都只能以mount方式启动数据库实例,否则系统启动时会重构回滚表空间,生成 Redo 日志;并且,启动后应用可能连接到数据库实例进行操作,破坏主备库的数据一致性。
3.在实时主备搭建完成后,启动守护进程和监视器后,会自动打开数据库将数据库设置为open,不需要也不能自己手动切换数据库状态。
4.实时主备是数据守护系统中的一种DM数据守护方案,通过搭建实时主备,能够更好的理解和掌握数据守护系统,在之后搭建读写分离集群、MPP主备时也能够更快的完成,这些数据守护方案在搭建的过程中有很多的相通之处。