1、关闭防火墙
2、修改绑定
IP IPADDR=""
NATEMASH="255.255.255.0"
3、修改主机名
[root@DSC1 ~]# more /etc/sysconfig/network
# Created by anaconda
NETWORKING=yes
HOSTNAME=DSC2
*并解析hosts
4、创建用户
groupadd dinstall
useradd -g dinstall -m -d /home/dmdba -s /bin/bash dmdba
passwd dmdba
注意事项
1.DMASM 的两个节点分别配置 dmdcr.ini,dmdcr_path 相同,dmasvrmal.ini 文件内容也相同,dmdcr_seqo 分别为 0 和 1。
2.注册,初始化实例,绑定磁盘等都在一台机器上完成。配置文件也在一个节点写好发送过去进行修改。
3.绑定磁盘的所属用户是dmdba。尽量不要使用root用户绑定。
DSC1节点添加硬盘,
配置共享磁盘时,在多个绑定虚拟机目录下.vmx文件【虚拟机的,不是磁盘的】中添加以下内容
disk.locking = "FALSE"
scsi1:0.SharedBus="Virtual"
在共享磁盘上裸设备划分
1) 输入fdisk /dev/sdb
2) 依次输入 n p 1 回车 +1G 回车,完成第一块磁盘划分
3) 依次输入 n p 2 回车 +1G 回车,完成第二块磁盘划分
4) 依次输入 n p 3 回车 +5G 回车,完成第三块磁盘划分
5) 依次输入 n p 4 回车 回车 回车,完成第四块磁盘划分
6) 编辑/etc/udev/rules.d/60-raw.rules文件,增加以下语句
ACTION=="add", KERNEL=="sdb1", RUN+="/bin/raw /dev/raw/raw1 %N"
ACTION=="add", KERNEL=="sdb2", RUN+="/bin/raw /dev/raw/raw2 %N"
ACTION=="add", KERNEL=="sdb3", RUN+="/bin/raw /dev/raw/raw3 %N"
ACTION=="add", KERNEL=="sdb4", RUN+="/bin/raw /dev/raw/raw4 %N"
ACTION=="add", KERNEL=="raw[1-4]", OWNER="dmdba", GROUP="dinstall", MODE="660"
最后执行start_udev,完成裸设备绑定
注意:7.x系统使用命令
partprobe /dev/sdb
udevadm trigger --type=devices --action=change
systemctl restart systemd-udev-trigger.service
【centos7 : systemctl restart systemd-udev-trigger.service 】
可以通过blockdev --getsize64 /dev/raw/raw1命令查看裸设备大小
ll /dev/raw/raw*
----------------------------------------------------------------------------------------------------------------------------------------------
创建配置文件存放目录,2 个节点都要执行
mkdir -p /home/dmdba/conf
chown dmdba:dinstall /home/dmdba/conf
准备dmdcr_cfg.ini配置文件
vi dmdcr_cfg.ini
DCR_N_GRP = 3
DCR_VTD_PATH = /dev/raw/raw2
DCR_OGUID = 63635
[GRP]
DCR_GRP_TYPE = CSS
DCR_GRP_NAME = GRP_CSS
DCR_GRP_N_EP = 2
DCR_GRP_DSKCHK_CNT = 60
[GRP_CSS]
DCR_EP_NAME = CSS1
DCR_EP_HOST = 192.168.208.183
DCR_EP_PORT = 9341
[GRP_CSS]
DCR_EP_NAME = CSS2
DCR_EP_HOST = 192.168.208.193
DCR_EP_PORT = 9343
[GRP]
DCR_GRP_TYPE = ASM
DCR_GRP_NAME = GRP_ASM
DCR_GRP_N_EP = 2
DCR_GRP_DSKCHK_CNT = 60
[GRP_ASM]
DCR_EP_NAME = ASM1
DCR_EP_SHM_KEY = 93360
DCR_EP_SHM_SIZE = 20
DCR_EP_HOST = 192.168.208.183
DCR_EP_PORT = 9349
DCR_EP_ASM_LOAD_PATH = /dev/raw
[GRP_ASM]
DCR_EP_NAME = ASM2
DCR_EP_SHM_KEY = 93361
DCR_EP_SHM_SIZE = 20
DCR_EP_HOST = 192.168.208.193
DCR_EP_PORT = 9351
DCR_EP_ASM_LOAD_PATH = /dev/raw
[GRP]
DCR_GRP_TYPE = DB
DCR_GRP_NAME = GRP_DSC
DCR_GRP_N_EP = 2
DCR_GRP_DSKCHK_CNT = 60
[GRP_DSC]
DCR_EP_NAME = DSC1
DCR_EP_SEQNO = 0
DCR_EP_PORT = 5236
DCR_CHECK_PORT = 9741
[GRP_DSC]
DCR_EP_NAME = DSC2
DCR_EP_SEQNO = 1
DCR_EP_PORT = 5236
DCR_CHECK_PORT = 9742
----------------------------------------------------------------------------------------------------------------------------------------------
编辑 asmcmd.txt
#asm script file
create dcrdisk '/dev/raw/raw1' 'dcr'
create votedisk '/dev/raw/raw2' 'vote'
create asmdisk '/dev/raw/raw3' 'LOG0'
create asmdisk '/dev/raw/raw4' 'DATA0'
init dcrdisk '/dev/raw/raw1' from '/home/dmdba/conf/dmdcr_cfg.ini' identified by 'abcd'
init votedisk '/dev/raw/raw2' from '/home/dmdba/conf/dmdcr_cfg.ini'
执行 ./dmasmcmd script_file=/home/dmdba/conf/asmcmd.txt 只需在一台机器执行即可
----------------------------------------------------------------------------------------------------------------------------------------------
准备DMASM的MAL配置文件(命名为dmasvrmal.ini),使用DMASM的所有节点都要配置,内容完全一样
[MAL_INST1]
MAL_INST_NAME = ASM1
MAL_HOST = 10.10.10.111
MAL_PORT = 7236
[MAL_INST2]
MAL_INST_NAME = ASM2
MAL_HOST = 10.10.10.112
MAL_PORT = 7237
----------------------------------------------------------------------------------------------------------------------------------------------
1 DMDCR_CFG.INI
dmdcr_cfg.ini 是格式化 DCR 和 Voting Disk 的配置文件。配置信息包括三类:集群环境全局信息、集群组信息、以及组内节点信息。
使用 dmasmcmd 工具,可以根据 dmdcr_cfg.ini 配置文件,格式化 DCR 和VotingDisk。
集群环境全局信息
DCR_VTD_PATH :Voting Disk 路径
DCR_N_GRP :集群环境包括多少个 group,取值范围 1~16
DCR_OGUID: 消息标识,dmcssm 登录 dmcss 消息校验用
集群组信息
DCR_GRP_TYPE: 组类型(CSS\ASM\DB)
DCR_GRP_NAME: 组名,16 字节,配置文件内不可重复
DCR_GRP_N_EP :组内节点个数 N,最大 16
DCR_GRP_EP_ARR :组内包含的节点序列号,{0,1,2,…N-1}用户不能指定,仅用于从 DCR 磁盘 export 出来可见。
DCR_GRP_N_ERR_EP: 组内故障节点个数,用户不能指定,仅用于从 DCR 磁盘 export 出来可见。
DCR_GRP_ERR_EP_ARR: 组内故障节点序列号,用户不能指定,仅用于从 DCR 磁盘 export 出来可见。
DCR_GRP_DSKCHK_CNT: 磁盘心跳机制,容错时间,单位秒,缺省 60S,取值范围 5~600节点信息,某些属性可能只针对某一类型节点,比如 SHM_KEY 只针对 ASM 节点有效
DCR_EP_NAME :节点名,16 字节,配置文件内不可重复,DB 的节点名必须和 dm.ini 里的 INSTANCE_NAME 保持一致ASM 的节点名必须和 dmmal.ini 里的 MAL_INST_NAME 一致同一类型节点的 EP_NAME 不能重复
DCR_EP_SEQNO: 组内序号,CSS/ASM 不能配置,自动分配DB 可以配置,0 ~ n_ep -1,组内不能重复,如不配置则自动分配
DCR_EP_HOST: 节点 IP(CSS/ASM 有效,表示登录 CSS/ASM 的 IP 地址)对 DB 来说,是绑定 VIP 的网卡对应的物理 IP 地址CSS 中设置表示 DMCSSM 通过该 IP 连接 CSS;ASM 中设置表示 DB 通过该 IP 连接 ASM
DCR_EP_PORT :节点 TCP 监听端口(CSS/ASM/DB 有效,对应登录 CSS/ASM/DB 的端口号),节点实例配置此参数,取值范围 1024~65534;发起连接端的端口在 1024~65535 之间随机分配特别对 DB 来说,DB 的 DCR_EP_PORT 与 dm.ini 中的 PORT_NUM 不一致时,DB 端口以 DCR_EP_PORT 为准。若要使用 VIP 功能,则不同服务器上配置的 DCR_EP_PORT 要相同
DCR_EP_SHM_KEY: 共享内存标识,数值类型(ASM 有效,初始化共享内存的标识符),应为大于 0 的 4 字节整数
DCR_VIP :节点 VIP(DB 有效,表示配置的虚拟 IP),需要和 DCR_EP_HOST 在同一网段。若需要取消 VIP 配置,仅需要将 DB 组的 DCR_VIP 和DCR_EP_HOST 删除即可
DCR_CHECK_PORT DCR :检查端口号。检查实例是否活动的时候用,各实例不能冲突。实例配 置 此 参 数 , 取 值 范 围 1024~65535 ; DCR 发 起 连 接 的 端 口 在1024~65534 之间随机分配
DCR_EP_SHM_SIZE: 共享内存大小,单位 M,(ASM 有效,初始化共享内存大小),取值范围10~1024
DCR_EP_ASM_LOAD_PATH ASM :磁盘扫描路径,Linux 下一般为/dev/raw,文件模拟情况,必须是全路径,不能是相对路径
准备dmdcr.ini配置文件
第一个节点:
DMDCR_PATH = /dev/raw/raw1 #dmasmsvr使用的MAL配置文件路径
DMDCR_MAL_PATH =/home/dmdba/conf/dmasvrmal.ini
DMDCR_SEQNO = 0
#ASM重启参数,命令行方式启动
DMDCR_ASM_RESTART_INTERVAL = 0
DMDCR_ASM_STARTUP_CMD = /opt/dmdbms/bin/dmasmsvr dcr_ini=/home/dmdba/conf/dmdcr.ini
#DB重启参数,命令行方式启动
DMDCR_DB_RESTART_INTERVAL = 0
DMDCR_DB_STARTUP_CMD = /opt/dmdbms/bin/dmserver path=/home/dmdba/conf/dsc1_config/dm.ini dcr_ini=/home/dmdba/conf/dmdcr.ini
第二个节点:
DMDCR_PATH = /dev/raw/raw1 #dmasmsvr使用的MAL配置文件路径
DMDCR_MAL_PATH =/home/dmdba/conf/dmasvrmal.ini
DMDCR_SEQNO = 1
#ASM重启参数,命令行方式启动
DMDCR_ASM_RESTART_INTERVAL = 0
DMDCR_ASM_STARTUP_CMD = /opt/dmdbms/bin/dmasmsvr dcr_ini=/home/dmdba/conf/dmdcr.ini
#DB重启参数,命令行方式启动
DMDCR_DB_RESTART_INTERVAL = 0
DMDCR_DB_STARTUP_CMD = /opt/dmdbms/bin/dmserver path=/home/dmdba/conf/dsc2_config/dm.ini dcr_ini=/home/dmdba/conf/dmdcr.ini
dmdcr.ini 是 dmcss、dmasmsvr、dmasmtool 等工具的输入参数。记录了当前节点序列号以及 DCR 磁盘路径。
DMDCR_PATH 记录 DCR 磁盘路径
DMDCR_SEQNO 记录当前节点序号(用来获取 ASM 登录信息)
DMDCR_MAL_PATH 保存 dmmal.ini 配置文件的路径,仅对 dmasmsvr 有效
DMDCR_ASM_RESTART_INTERVAL DMCSS 认定 DMASM 节点故障重启的时间间隔(取值 0~86400s),DMCSS 只负责和 DMDCR_SEQNO 节点号相等的DMASM 节点的故障重启,超过设置的时间后,如果 DMASM 节点的 active 标记仍然为 FALSE,则 DMCSS 会执行自动拉起。如果配置为 0,则不会执行自动拉起操作,默认为 60s。
DMDCR_ASM_STARTUP_CMD DMCSS 认定 DMASM 节点故障后,执行自动拉起的命令串,可以配置为服务方式或命令行方式启动,具体可参考说明部分。
DMDCR_DB_RESTART_INTERVAL DMCSS 认定 DMDSC 节点故障重启的时间间隔(取值 0~86400s),DMCSS 只负责和 DMDCR_SEQNO 节点号相等的DMDSC 节点的故障重启,超过设置的时间后,如果 DMDSC 节点的 active 标记仍然为 FALSE,则 DMCSS 会执行自动拉起。如果配置为 0,则不会执行自动拉起操作,默认为 60s。
DMDCR_DB_STARTUP_CMD DMCSS 认定 DMDSC 节点故障后,执行自动拉起的命令串,可以配置为服务方式或命令行方式启动,具体可参考说明部分。
DMDCR_AUTO_OPEN_CHECK 指定时间内如果节点实例未启动,DMCSS 会自动将节点踢出集群环境,单位为秒,取值范围应大于等于 30s。不配置此参数时表示不启用此功能。
————————————————
注:配置过程中dmdcr.ini中先不将ASM服务和DMSERVER自动拉起,配置过程中先手动启动DMCSS、DMASM、DMSERVER服务,待所有配置都完成后,再修改dmdcr.ini将ASM服务和DMSERVER服务配置成自动拉起。
----------------------------------------------------------------------------------------------------------------------------------------------
在两个节点先后分别启动dmcss、dmasmsvr程序
./dmcss DCR_INI=/home/dmdba/conf/dmdcr.ini
./dmasmsvr DCR_INI=/home/dmdba/conf/dmdcr.ini
主DMCSS启动后屏幕打印如下:
[dmdba@dsc1 bin]$ ./dmcss DCR_INI=/home/dmdba/conf/dmdcr.ini
DMCSS V8
DMCSS IS READY
[CSS]: 设置EP CSS1[0]为控制节点
[ASM]: 设置EP ASM1[0]为控制节点
[ASM]: 设置命令[START NOTIFY], 目标站点 ASM1[0], 命令序号[2]
[ASM]: 设置命令[EP START], 目标站点 ASM1[0], 命令序号[3]
[ASM]: 设置命令[NONE], 目标站点 ASM1[0], 命令序号[0]
[ASM]: 设置命令[EP START], 目标站点 ASM2[1], 命令序号[5]
[ASM]: 设置命令[NONE], 目标站点 ASM2[1], 命令序号[0]
[ASM]: 设置命令[EP OPEN], 目标站点 ASM1[0], 命令序号[8]
[ASM]: 设置命令[EP OPEN], 目标站点 ASM2[1], 命令序号[9]
[ASM]: 设置命令[NONE], 目标站点 ASM1[0], 命令序号[0]
[ASM]: 设置命令[NONE], 目标站点 ASM2[1], 命令序号[0]
[ASM]: 设置命令[EP REAL OPEN], 目标站点 ASM1[0], 命令序号[11]
[ASM]: 设置命令[EP REAL OPEN], 目标站点 ASM2[1], 命令序号[12]
[ASM]: 设置命令[NONE], 目标站点 ASM1[0], 命令序号[0]
[ASM]: 设置命令[NONE], 目标站点 ASM2[1], 命令序号[0]
----------------------------------------------------------------------------------------------------------------------------------------------
使用dmasmtool工具创建DMASM磁盘组
选择一个节点(10.10.10.111),启动dmasmtool工具。
./dmasmtool dcr_ini=/home/dmdba/conf/dmdcr.ini
输入下列语句创建DMASM磁盘组:
#创建日志磁盘组
create diskgroup 'DMLOG' asmdisk '/dev/raw/raw3'
#创建数据磁盘组
create diskgroup 'DMDATA' asmdisk '/dev/raw/raw4'
----------------------------------------------------------------------------------------------------------------------------------------------
准备dminit.ini配置文件,保存到/home/dmdba/conf目录
db_name = DSC
system_path = +DMDATA/data
system = +DMDATA/data/dsc/system.dbf
system_size = 128
roll = +DMDATA/data/dsc/roll.dbf
roll_size = 128
main = +DMDATA/data/dsc/main.dbf
main_size = 128
ctl_path = +DMDATA/data/dsc/dm.ctl
ctl_size = 8
log_size = 1024
PAGE_SIZE = 32
dcr_path = /dev/raw/raw1 #dcr磁盘路径,目前不支持asm,只能是裸设备
dcr_seqno = 0
auto_overwrite = 1
[DSC1]
config_path = /home/dmdba/conf/dsc1_config
port_num = 5236
mal_host = 10.10.10.111
mal_port = 9540
log_path = +DMLOG/log/DSC0_LOG01.log
log_path = +DMLOG/log/DSC0_LOG02.log
[DSC2]
config_path = /home/dmdba/conf/dsc2_config
port_num = 5236
mal_host = 10.10.10.112
mal_port = 9541
log_path = +DMLOG/log/DSC1_LOG01.log
log_path = +DMLOG/log/DSC1_LOG02.log
----------------------------------------------------------------------------------------------------------------------------------------------
使用dminit初始化DB环境
选择一个节点(10.10.10.111),启动dminit工具初始化数据库。dminit执行完成后,会在config_path目录(/home/dmdba/conf/dsc1_config和/home/dmdba/conf/dsc2_config)下生成配置文件dm.ini和dmmal.ini。
./dminit control=/home/dmdba/conf/dminit.ini
屏幕打印如下:
[dmdba@dsc1 bin]$ ./dminit control=/home/dmdba/conf/dminit.ini
initdb V8
db version: 0x7000c
file dm.key not found, use default license!
License will expire on 2022-03-12
Normal of FAST
Normal of DEFAULT
Normal of RECYCLE
Normal of KEEP
Normal of ROLL
log file path: +DMLOG/log/DSC0_LOG01.log
log file path: +DMLOG/log/DSC0_LOG02.log
log file path: +DMLOG/log/DSC1_LOG01.log
log file path: +DMLOG/log/DSC1_LOG02.log
write to dir [+DMDATA/data/DSC].
create dm database success. 2021-03-31 16:50:10
----------------------------------------------------------------------------------------------------------------------------------------------
启动数据库服务器
将10.10.10.111机器/home/dmdba/conf/dsc2_config目录拷贝到10.10.10.112机器相同目录下,再分别启动dmserver即可完成DMDSC集群搭建。
如果DMCSS配置有自动拉起dmserver的功能,可以等待DMCSS自动拉起实例,不需要手动启动。
如果需要手动启动,可参考下面的操作步骤:
10.10.10.111
./dmserver /home/dmdba/conf/dsc1_config/dm.ini dcr_ini=/home/dmdba/conf/dmdcr.ini
10.10.10.112
./dmserver /home/dmdba/conf/dsc2_config/dm.ini dcr_ini=/home/dmdba/conf/dmdcr.ini
----------------------------------------------------------------------------------------------------------------------------------------------
注册服务 root用户执行
************注册DMCSS服务************
节点1:
./dm_service_installer.sh -t dmcss -p CSS1 -dcr_ini /home/dmdba/conf/dmdcr.ini
节点2:
./dm_service_installer.sh -t dmcss -p CSS2 -dcr_ini /home/dmdba/conf/dmdcr.ini
************注册DMASM服务************
节点1:
./dm_service_installer.sh -t dmasmsvr -dcr_ini /home/dmdba/conf/dmdcr.ini -p ASM1 -y DmCSSServiceCSS1
节点2:
./dm_service_installer.sh -t dmasmsvr -dcr_ini /home/dmdba/conf/dmdcr.ini -p ASM2 -y DmCSSServiceCSS2
************注册DMSERVER服务************
节点1:
./dm_service_installer.sh -t dmserver -dm_ini /home/dmdba/conf/dsc1_config/dm.ini -dcr_ini /home/dmdba/conf/dmdcr.ini -p DSC1 -y DmASMSvrServiceASM1
节点2:
./dm_service_installer.sh -t dmserver -dm_ini /home/dmdba/conf/dsc2_config/dm.ini -dcr_ini /home/dmdba/conf/dmdcr.ini -p DSC2 -y DmASMSvrServiceASM2
vi /home/dmdba/conf/dmcssm.ini
CSSM_OGUID = 63635
CSSM_CSS_IP = 10.10.10.111:9341
CSSM_CSS_IP = 10.10.10.112:9343
CSSM_LOG_PATH =/opt/dmdbms/log
CSSM_LOG_FILE_SIZE = 32
CSSM_LOG_SPACE_LIMIT = 1024
启动监视器
./dmcssm ini_path=/home/dmdba/conf/dmcssm.ini
归档配置
节点一:
alter database mount;
alter database archivelog;
alter database add archivelog 'DEST=/dmarch,TYPE=LOCAL,FILE_SIZE=256,SPACE_LIMIT=2048';
alter database add archivelog 'DEST=DSC2,TYPE=REMOTE,FILE_SIZE=256,SPACE_LIMIT=2048,INCOMING_PATH=/remote_arch';
alter database open;
节点二:
alter database mount;
alter database archivelog;
alter database add archivelog 'DEST=/dmarch,TYPE=LOCAL,FILE_SIZE=256,SPACE_LIMIT=2048';
alter database add archivelog 'DEST=DSC1,TYPE=REMOTE,FILE_SIZE=256,SPACE_LIMIT=2048,INCOMING_PATH=/remote_arch';
alter database open;
更多资讯请上达梦技术社区了解:https://eco.dameng.com