2021-02-26

达梦共享集群dsc搭建
每台主机至少准备 2 块网卡，提供内部网络和外部网络服务
环境准备
主机 对外ip 心跳ip 实例名 操作系统 内存
redo1 192.168.118.66 10.10.10.66 DSC0 centos7 4G
redo2 192.168.118.88 10.10.10.88 DSC1 cetnos7 4G
共享存储最少需要划分4块磁盘
共享存储20G
/dev/sdb1 raw1 dcr disk 2g
/dev/sdb2 raw2 voting disk 3g
/dev/sdb3 raw3 log disk 5g
/dev/sdb4 raw4 data disk 10g
关闭SELINUX，防火墙
vi /etc/selinux/config
SELINUX=disabled
systemctl stop firewalld
systemctl disable firewalld
创建用户组和安装目录
mkdir -p /dm8
mkdir -p /data
groupadd dinstall
useradd -g dinstall dmdba
chown -R dmdba:dinstall /dm8
chown -R dmdba:dinstall /data
passwd dmdba
修改hosts文件
echo "
192.168.118.66 redo1
192.168.118.88 redo2" >> /etc/hosts
设置文件最大打开数目
cat >> /etc/security/limits.conf << EOF
dmdba soft nofile 65536
dmdba hard nofile 65536
EOF
安装数据库(过程忽略,后续命令都在/dm8/bin下)，切记不要初始化数据库！！！

查看磁盘大小，如下所示一个20G的共享磁盘

给共享磁盘分区
parted /dev/sdb

裸设备绑定 ，编辑文件 /etc/udev/rules.d/60-raw.rules
ACTION==“add”, KERNEL==“sdb1”, RUN+="/bin/raw /dev/raw/raw1 %N"
ACTION==“add”, KERNEL==“sdb2”, RUN+="/bin/raw /dev/raw/raw2 %N"
ACTION==“add”, KERNEL==“sdb3”, RUN+="/bin/raw /dev/raw/raw3 %N"
ACTION==“add”, KERNEL==“sdb4”, RUN+="/bin/raw /dev/raw/raw4 %N"
ACTION==“add”, KERNEL==“raw[1-4]”, OWNER=“dmdba”, GROUP=“dinstall”, MODE=“660”
最后执行 systemctl restart systemd-udev-trigger.service 完成裸设备绑定
查看绑定的裸设备
ll /dev/raw*

查看裸设备大小
blockdev --getsize64 /dev/raw/raw*

切换到dmdba用户 后续配置文件放在/data目录下
vim dmdcr_cfg.ini #两节点配置相同
DCR_N_GRP = 3
DCR_VTD_PATH = /dev/raw/raw2
DCR_OGUID = 63635
[GRP]
DCR_GRP_TYPE = CSS
DCR_GRP_NAME = GRP_CSS
DCR_GRP_N_EP = 2
DCR_GRP_DSKCHK_CNT = 60
[GRP_CSS]
DCR_EP_NAME = CSS0
DCR_EP_HOST = 10.10.10.66
DCR_EP_PORT = 9341
[GRP_CSS]
DCR_EP_NAME = CSS1
DCR_EP_HOST = 10.10.10.88
DCR_EP_PORT = 9343
[GRP]
DCR_GRP_TYPE = ASM
DCR_GRP_NAME = GRP_ASM
DCR_GRP_N_EP = 2
DCR_GRP_DSKCHK_CNT = 60
[GRP_ASM]
DCR_EP_NAME = ASM0
DCR_EP_SHM_KEY = 93360
DCR_EP_SHM_SIZE = 10
DCR_EP_HOST = 192.168.118.66
DCR_EP_PORT = 9349
DCR_EP_ASM_LOAD_PATH = /dev/raw
[GRP_ASM]
DCR_EP_NAME = ASM1
DCR_EP_SHM_KEY = 93361
DCR_EP_SHM_SIZE = 10
DCR_EP_HOST = 192.168.118.88
DCR_EP_PORT = 9351
DCR_EP_ASM_LOAD_PATH = /dev/raw
[GRP]
DCR_GRP_TYPE = DB
DCR_GRP_NAME = GRP_DSC
DCR_GRP_N_EP = 2
DCR_GRP_DSKCHK_CNT = 60
[GRP_DSC]
DCR_EP_NAME = DSC0
DCR_EP_SEQNO = 0
DCR_EP_PORT = 5236
DCR_CHECK_PORT = 9741
[GRP_DSC]
DCR_EP_NAME = DSC1
DCR_EP_SEQNO = 1
DCR_EP_PORT = 5236
DCR_CHECK_PORT = 9742
使用 DMASMCMD 工具初始化（一节点执行）
./dmasmcmd
create dcrdisk ‘/dev/raw/raw1’ ‘dcr’
create votedisk ‘/dev/raw/raw2’ ‘vote’
create asmdisk ‘/dev/raw/raw3’ ‘LOG0’
create asmdisk ‘/dev/raw/raw4’ ‘DATA0’
init dcrdisk ‘/dev/raw/raw1’ from '/data/dmdcr_cfg.ini’identified by ‘abcd’
init votedisk ‘/dev/raw/raw2’ from ‘/data/dmdcr_cfg.ini’
准备 DMASM 的 MAL 配置文件（命名为 dmasvrmal.ini），两节点配置一样
[MAL_INST1]
MAL_INST_NAME = ASM0
MAL_HOST = 10.10.10.66
MAL_PORT = 7236
[MAL_INST2]
MAL_INST_NAME = ASM1
MAL_HOST = 10.10.10.88
MAL_PORT = 7237

两个节点分别配置 dmdcr.ini，dmdcr_seqo 分别为 0 和 1。
节点一
DMDCR_PATH = /dev/raw/raw1
DMDCR_MAL_PATH =/data/dmasvrmal.ini #dmasmsvr 使用的 MAL 配置文件路径
DMDCR_SEQNO = 0
#ASM 重启参数，命令行方式启动
DMDCR_ASM_RESTART_INTERVAL = 0
DMDCR_ASM_STARTUP_CMD = /dm8/bin/dmasmsvr dcr_ini=/data/dmdcr.ini
#DB 重启参数，命令行方式启动
DMDCR_DB_RESTART_INTERVAL = 0
DMDCR_DB_STARTUP_CMD = /dm8/bin/dmserver path=/data/dsc0_config/dm.ini dcr_ini=/data/dmdcr.ini
节点二
DMDCR_PATH = /dev/raw/raw1
DMDCR_MAL_PATH =/data/dmasvrmal.ini #dmasmsvr 使用的 MAL 配置文件路径
DMDCR_SEQNO = 1
#ASM 重启参数，命令行方式启动
DMDCR_ASM_RESTART_INTERVAL = 0
DMDCR_ASM_STARTUP_CMD = /dm8/bin/dmasmsvr dcr_ini=/data/dmdcr.ini
#DB 重启参数，命令行方式启动
DMDCR_DB_RESTART_INTERVAL = 0
DMDCR_DB_STARTUP_CMD = /dm8/bin/dmserver path=/data/dsc1_config/dm.ini dcr_ini=/data/dmdcr.ini
两节点分别启动 DMCSS、DMASM 服务程序
./dmcss DCR_INI=/data/dmdcr.ini
./dmasmsvr DCR_INI=/data/dmdcr.ini

使用 dmasmtool 工具创建 DMASM 磁盘组（一节点执行）
./dmasmtool DCR_INI=/data/dmdcr.ini
create diskgroup ‘DMLOG’ asmdisk ‘/dev/raw/raw3’
create diskgroup ‘DMDATA’ asmdisk ‘/dev/raw/raw4’
配置dminit.ini 文件（一个节点就行）
db_name = dsc
system_path = +DMDATA/data
system = +DMDATA/data/dsc/system.dbf
system_size = 128
roll = +DMDATA/data/dsc/roll.dbf
roll_size = 128
main = +DMDATA/data/dsc/main.dbf
main_size = 128
ctl_path = +DMDATA/data/dsc/dm.ctl
ctl_size = 8
log_size = 256
dcr_path = /dev/raw/raw1 #dcr 磁盘路径，目前不支持 asm，只能是裸设备
dcr_seqno = 0
auto_overwrite = 1
[DSC0] #inst_name 跟 dmdcr_cfg.ini 中 DB 类型 group 中 DCR_EP_NAME 对应
config_path = /data/dsc0_config
port_num = 5236
mal_host = 10.10.10.66
mal_port = 9340
log_path = +DMLOG/log/dsc0_log01.log
log_path = +DMLOG/log/dsc0_log02.log
[DSC1] #inst_name 跟 dmdcr_cfg.ini 中 DB 类型 group 中 DCR_EP_NAME 对应
config_path = /data/dsc1_config
port_num = 5237
mal_host = 10.10.10.88
mal_port = 9341
log_path = +DMLOG/log/dsc1_log01.log
log_path = +DMLOG/log/dsc1_log02.log

选择一个节点,启动 dminit 工具初始化数据库。
./dminit control=/data/dminit.ini

dminit 执行完成后，会在 config_path 目录（/data/dsc0_config 和/data/dsc1_config）下生成配置文件 dm.ini 和 dmmal.ini， 将/data/dsc1_config 目录拷贝到另外一个节点相同目录下，再分别启动 dmserver
./dmserver /data/dsc0_config/dm.ini dcr_ini=/data/dmdcr.ini
./dmserver /data/dsc1_config/dm.ini dcr_ini=/data/dmdcr.ini

任意一节点登录数据库，select * from v$dsc_ep_info;查看集群状态

Root用户注册 DMCSS和DMASM服务 ，/dm8/script/root/目录下面
节点1
./dm_service_installer.sh -t dmcss -dcr_ini /data/dmdcr.ini -p DMCSS0
./dm_service_installer.sh -t dmasmsvr -dcr_ini /data/dmdcr.ini -p DMASM0 -y DmCSSServiceDMCSS0
./dm_service_installer.sh -t dmserver -p DMSERVER0 -dm_ini /data/dsc0_config/dm.ini -dcr_ini /data/dmdcr.ini -y DmASMSvrServiceDMASM0
节点2
./dm_service_installer.sh -t dmcss -dcr_ini /data/dmdcr.ini -p DMCSS1
./dm_service_installer.sh -t dmasmsvr -dcr_ini /data/dmdcr.ini -p DMASM1 -y DmCSSServiceDMCSS1
./dm_service_installer.sh -t dmserver -p DMSERVER1 -dm_ini /data/dsc1_config/dm.ini -dcr_ini /data/dmdcr.ini -y DmASMSvrServiceDMASM1