DM数据库全库迁移方式之冷拷贝

已于 2023-01-12 19:46:54 修改
阅读量1.5k 收藏
点赞数 2
分类专栏： 达梦 文章标签： 数据库
于 2020-06-19 19:30:34 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Mrkill123/article/details/106862578
版权

达梦数据库主要可以通过DMRMAN备份还原、dexp/dimp逻辑备份方式、冷拷贝的方式进行去全库的迁移。DTS工具更适用于单个或者部分对象的迁移。

一、环境说明

系统环境说明
操作系统Centos 7.8
数据库软件安装路径/dm/dmdbms
数据库文件路径/dm/data02
数据库版本DM V8
新的数据库文件路径/dm/data

二、目的

通过冷拷贝的方式迁移整个数据库，新的数据库文件路径为/dm/data。
此处只记录迁移到同一台机器的不同目录。迁移到不同的机器上需要先安装相同版本的数据库软件，迁移的操作过程一样。

三、操作过程

1、关闭数据库

[dmdba@localhost ~]$ cd /dm/dmdbms/bin
[dmdba@localhost bin]$ ./DmService stop
Stopping DmService:                                        [ OK ]

2、拷贝所有的数据库文件

拷贝所有的数据文件、日志文件、控制文件等数据库文件。
这里是将整个数据库文件目录从/dm/data02拷贝至/dm/data目录

[dmdba@localhost ~]$ cd /dm/data02/
[dmdba@localhost data02]$ cp -r DAMENG /dm/data

3、将控制文件转换为文本文件

控制文件dm.ctl默认是二进制格式，需要通过dmctlcvt工具将其转换为文本文件，然后对文本文件进行修改之后再转换为二进制文件。
DM8 的dmctlcvt工具使用帮助如下：

[dmdba@localhost bin]$ ./dmctlcvt help
DMCTLCVT V8

格式: ./dmctlcvt KEYWORD=value
注意: 控制文件名称必须指定为dm.ctl、dmmpp.ctl、dss.ctl

关键字              说明
--------------------------------------------------------------------------------
TYPE                1 转换控制文件为文本文件（源文件路径中控制文件名称必须是dm.ctl或dmmpp.ctl或dss.ctl）
                    2 转换文本文件为控制文件（目标文件路径中控制文件名称必须是dm.ctl或dmmpp.ctl或dss.ctl）
SRC                 源文件路径
DEST                目标文件路径
DCR_INI             dmdcr.ini文件路径
DFS_INI             dmdfs.ini文件路径
HELP                打印帮助信息

示例：
./dmctlcvt TYPE=1 SRC=/opt/dmdbms/data/dameng/dm.ctl DEST=/opt/dmdbms/data/dameng/dmctl.txt
./dmctlcvt TYPE=2 SRC=/opt/dmdbms/data/dameng/dmctl.txt DEST=/opt/dmdbms/data/dameng/dm.ctl

使用dmctlcvt工具进行转换：

[dmdba@localhost dm]$ cd dmdbms/bin
[dmdba@localhost bin]$ ./dmctlcvt TYPE=1 SRC=/dm/data/DAMENG/dm.ctl DEST=/home/dmdba/dm_ctl.txt
DMCTLCVT V8
convert ctl to txt success!
或者使用下面语句：
[dmdba@localhost bin]$ ./dmctlcvt c2t /dm/data/DAMENG/dm.ctl /home/dmdba/dm_ctl.txt
DMCTLCVT V8
convert ctl to txt success!
两个语句作用相同。

控制文件文本内容如下：

##############################################################################
## please do not adjust parameter order, ensure the ctl have no difference ###
##########################################################################


# database name
dbname=DAMENG
# server mode
svr_mode=0
#OGUID
oguid=0
# db server version
version=117507927
# database version
db_version=458762
# pseg version
pseg_version=458762
#SGUID
sguid=1311874053
#NEXT_TS_ID
next_ts_id=6
#RAC_NODES
rac_nodes=1
#NEXT_HTS_ID
next_htsid=129
#TIME_FLAG
time_flag=170
#MDIR_FLAG
mdir_flag=31
#STARTUP_CNT
startup_cnt=2
#LAST_STARTUP_TIME
last_startup_time=DATETIME '2020-6-19 15:28:55'
#DM7_DCT_VERSION
dm7_dct_version=7
#DM8_DCT_VERSION
dm8_dct_version=18

#===============================================
#===============================================

# table space name
ts_name=SYSTEM
 # table space ID
ts_id=0
# table space status
ts_state=0
# table space cache
ts_cache=
# DSC node number
ts_nth=0
# table space create time
ts_create_time=DATETIME '2020-6-17 10:28:5'
# table space modify time
ts_modify_time=DATETIME '2020-6-17 10:28:5'
# table space encrypt flag
ts_encrypt_flag=0
# table space copy num
ts_copy_num=0
# table space region size flag
ts_size_flag=0

#-----------------------------------------------

# file path
fil_path=/dm/data02/DAMENG/SYSTEM.DBF
# mirror path
mirror_path=
# file id
fil_id=0
# whether the file is auto extend
autoextend=1
# file create time
fil_create_time=DATETIME '2020-6-17 10:28:5'
# file modify time
fil_modify_time=DATETIME '2020-6-17 10:28:5'
# the max size of file
fil_max_size=0
# next size of file
fil_next_size=0


#===============================================

# table space name
ts_name=ROLL
 # table space ID
ts_id=1
# table space status
ts_state=0
# table space cache
ts_cache=
# DSC node number
ts_nth=0
# table space create time
ts_create_time=DATETIME '2020-6-17 10:28:5'
# table space modify time
ts_modify_time=DATETIME '2020-6-17 10:28:5'
# table space encrypt flag
ts_encrypt_flag=0
# table space copy num
ts_copy_num=0
# table space region size flag
ts_size_flag=0

#-----------------------------------------------

# file path
fil_path=/dm/data02/DAMENG/ROLL.DBF
# mirror path
mirror_path=
# file id
fil_id=0
# whether the file is auto extend
autoextend=1
# file create time
fil_create_time=DATETIME '2020-6-17 10:28:5'
# file modify time
fil_modify_time=DATETIME '2020-6-17 10:28:5'
# the max size of file
fil_max_size=0
# next size of file
fil_next_size=0


#===============================================

# table space name
ts_name=RLOG
 # table space ID
ts_id=2
# table space status
ts_state=0
# table space cache
ts_cache=
# DSC node number
ts_nth=0
# table space create time
ts_create_time=DATETIME '2020-6-17 10:28:5'
# table space modify time
ts_modify_time=DATETIME '2020-6-17 10:28:5'
# table space encrypt flag
ts_encrypt_flag=0
# table space copy num
ts_copy_num=0
# table space region size flag
ts_size_flag=0

#-----------------------------------------------

# file path
fil_path=/dm/data02/DAMENG/DAMENG01.log
# mirror path
mirror_path=
# file id
fil_id=0
# whether the file is auto extend
autoextend=1
# file create time
fil_create_time=DATETIME '2020-6-17 10:28:5'
# file modify time
fil_modify_time=DATETIME '2020-6-17 10:28:5'
# the max size of file
fil_max_size=0
# next size of file
fil_next_size=0

# file path
fil_path=/dm/data02/DAMENG/DAMENG02.log
# mirror path
mirror_path=
# file id
fil_id=1
# whether the file is auto extend
autoextend=1
# file create time
fil_create_time=DATETIME '2020-6-17 10:28:5'
# file modify time
fil_modify_time=DATETIME '2020-6-17 10:28:5'
# the max size of file
fil_max_size=0
# next size of file
fil_next_size=0


#===============================================

# table space name
ts_name=MAIN
 # table space ID
ts_id=4
# table space status
ts_state=0
# table space cache
ts_cache=
# DSC node number
ts_nth=0
# table space create time
ts_create_time=DATETIME '2020-6-17 10:28:5'
# table space modify time
ts_modify_time=DATETIME '2020-6-17 10:28:5'
# table space encrypt flag
ts_encrypt_flag=0
# table space copy num
ts_copy_num=0
# table space region size flag
ts_size_flag=0

#-----------------------------------------------

# file path
fil_path=/dm/data02/DAMENG/MAIN.DBF
# mirror path
mirror_path=
# file id
fil_id=0
# whether the file is auto extend
autoextend=1
# file create time
fil_create_time=DATETIME '2020-6-17 10:28:5'
# file modify time
fil_modify_time=DATETIME '2020-6-17 10:28:5'
# the max size of file
fil_max_size=0
# next size of file
fil_next_size=0


#===============================================

# table space name
ts_name=TEST
 # table space ID
ts_id=5
# table space status
ts_state=0
# table space cache
ts_cache=NORMAL
# DSC node number
ts_nth=0
# table space create time
ts_create_time=DATETIME '2020-6-19 14:30:39'
# table space modify time
ts_modify_time=DATETIME '2020-6-19 14:34:13'
# table space encrypt flag
ts_encrypt_flag=0
# table space copy num
ts_copy_num=0
# table space region size flag
ts_size_flag=0

#-----------------------------------------------

# file path
fil_path=/dm/data02/DAMENG/test.dbf    
# mirror path
mirror_path=
# file id
fil_id=0
# whether the file is auto extend
autoextend=1
# file create time
fil_create_time=DATETIME '2020-6-19 14:30:39'
# file modify time
fil_modify_time=DATETIME '2020-6-19 14:34:13'
# the max size of file
fil_max_size=0
# next size of file
fil_next_size=0


#===============================================

# HUGE table space name
htsname=HMAIN
# HUGE table space id
htsid=128
#HUGE table space share flag
htsflag=0
# HUGE table space copy num
hts_copy_num=0
# HUGE table space region size flag
hts_size_flag=0
# HUGE table space create time
hts_create_time=DATETIME '2020-6-17 10:28:5'
# HUGE table space modify time
hts_modify_time=DATETIME '2020-6-17 10:28:5'
# HUGE table space path
htspath=/dm/data02/DAMENG/HMAIN

#===============================================

控制文件文本文件中第一部分为数据库相关属性及记录，第二部分为表空间数据文件、日志文件属性。

4、修改控制文件的文本文件

将dm_ctl.txt文件中的file path及htspath等涉及路径的配置，更改为对应新的路径。

更改后内容如下：

[dmdba@localhost bin]$ cat /home/dmdba/dm_ctl.txt|grep -v "mirror_path"|grep -v "^#"|grep path
fil_path=/dm/data/DAMENG/SYSTEM.DBF
fil_path=/dm/data/DAMENG/ROLL.DBF
fil_path=/dm/data/DAMENG/DAMENG01.log
fil_path=/dm/data/DAMENG/DAMENG02.log
fil_path=/dm/data/DAMENG/MAIN.DBF
fil_path=/dm/data/DAMENG/test.dbf
htspath=/dm/data/DAMENG/HMAIN

5、转换修改后的文本文件为新控制文件

使用dmctlcvt工具将修改后的文本文件转换为二进制文件：

[dmdba@localhost bin]$ ./dmctlcvt TYPE=2 SRC=/home/dmdba/dm_ctl.txt DEST=/dm/data/DAMENG/dm.ctl
DMCTLCVT V8
convert txt to ctl success!
或者使用下面语句：
[dmdba@localhost bin]$ ./dmctlcvt t2c /home/dmdba/dm_ctl.txt /dm/data/DAMENG/dm.ctl

6、更新dm.ini文件中配置的相关路径

查看需要更改的相关配置参数：

[dmdba@localhost ~]$ cd /dm/data/DAMENG/
[dmdba@localhost DAMENG]$ cat dm.ini |grep "/dm/data02"
		CTL_PATH      = /dm/data02/DAMENG/dm.ctl     #ctl file path
		CTL_BAK_PATH  = /dm/data02/DAMENG/ctl_bak    #dm.ctl backup path
		SYSTEM_PATH   = /dm/data02/DAMENG            #system path
		CONFIG_PATH   = /dm/data02/DAMENG            #config path
		TEMP_PATH    = /dm/data02/DAMENG        #temporary file path
		BAK_PATH    = /dm/data02/DAMENG/bak        #backup file path

更改后，内容如下：

[dmdba@localhost DAMENG]$ cat dm.ini |grep "/dm/data"
		CTL_PATH      = /dm/data/DAMENG/dm.ctl     #ctl file path
		CTL_BAK_PATH  = /dm/data/DAMENG/ctl_bak    #dm.ctl backup path
		SYSTEM_PATH   = /dm/data/DAMENG            #system path
		CONFIG_PATH   = /dm/data/DAMENG            #config path
		TEMP_PATH    = /dm/data/DAMENG        #temporary file path
		BAK_PATH    = /dm/data/DAMENG/bak        #backup file path

7、测试是否能正常启动

使用dmserver前台启动测试：

[dmdba@localhost ~]$ cd /dm/dmdbms/bin
[dmdba@localhost bin]$ ./dmserver /dm/data/DAMENG/dm.ini 
file dm.key not found, use default license!
version info: develop
Use normal os_malloc instead of HugeTLB
Use normal os_malloc instead of HugeTLB
DM Database Server x64 V8 1-1-87-20.06.01-122565-ENT  startup...
Database mode = 0, oguid = 0
License will expire on 2021-06-01
file lsn: 43647
ndct db load finished
ndct fill fast pool finished
iid page's trxid[10078]
NEXT TRX ID = 10079
pseg_collect_items, collect 0 active_trxs, 0 cmt_trxs, 0 pre_cmt_trxs, 0 active_pages, 0 cmt_pages, 0 pre_cmt_pages
pseg_process_collect_items end, 0 active trx, 0 active pages, 0 committed trx, 0 committed pages
total 0 active crash trx, pseg_crash_trx_rollback sys_only(0) begin ...
pseg_crash_trx_rollback end
purg2_crash_cmt_trx end, total 0 page purged
set EP[0]'s pseg state to inactive
pseg recv finished
nsvr_startup end.
aud sys init success.
aud rt sys init success.
systables desc init success.
ndct_db_load_info success.
nsvr_process_before_open begin.
nsvr_process_before_open success.
total 0 active crash trx, pseg_crash_trx_rollback sys_only(0) begin ...
pseg_crash_trx_rollback end
SYSTEM IS READY.

启动正常

8、修改数据库服务脚本INI_PATH配置

修改DmService服务脚本中INI_PATH的值为新路径下的dm.ini，内容如下：

[dmdba@localhost bin]$ cat DmService |grep -w "INI_PATH="
INI_PATH="/dm/data/DAMENG/dm.ini"

启动、关闭测试：

---start
[dmdba@localhost bin]$ ./DmService start
Starting DmService:                                        [ OK ]
[dmdba@localhost bin]$ ps -ef|grep -v grep|grep dms
dmdba      7371      1  1 18:02 pts/2    00:00:00 /dm/dmdbms/bin/dmserver /dm/data/DAMENG/dm.ini -noconsole

---stop
[dmdba@localhost bin]$ ./DmService stop
Stopping DmService:                                        [ OK ]

四、总结

​ DM数据库冷拷贝方式迁移与Oracle类似，都需要对控制文件进行修改。通过dmctlcvt工具对控制文件类型进行转换，在使用上要更方便一些。
​ DM数据库冷拷贝迁移不能跨大版本，小版本之间迁移需要注意CHECK_SVR_VERSION参数的配置，拷贝迁移到低版本时，迁移完成后，启动之前需要将该参数设置为0。

更多资讯请上达梦技术社区了解：https://eco.dameng.com

LeeWen2020
关注
  • 2
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
dm数据库迁移流程描述
04-11
dm数据库迁移流程描述
DM数据库安装包资源文件
08-02
DM数据库安装包资源文件
DM达梦数据库的使用以及数据迁移工具的使用
zouyang920的博客
11-12 3836
我们打开虚拟机的终端，在根目录下输入命令：每个数据库的用户名都是该数据库的名称，密码自己设置的，这样就可以通过不同的用户名连接不同的数据库，各个数据库之间只能操作自己的数据库，操作其他的数据库没有权限。在系统用户中可以管理用户，用户就是各个数据库，然后可以赋予各个数据库拥有的角色，这里我赋予了DBA角色，可以拥有数据库的增删改查的功能，如果没有赋予就会提示没有操作该数据库对象的权限。3.1 首先打开迁移工具并新建一个迁移任务 3.2 输入数据源信息 3.3 输入目标数据源信息 3.4 选择迁移的数据库
DM数据库文件迁移
Penrosee的博客
10-26 958
DM数据库文件迁移
达梦导入工具dimp
最新发布
lee_vincent1的博客
04-08 370
谨记：心存敬畏，行有所止。详细内容请查看官方文档《
022、数据库管理之数据迁移工具(DM)
细致-专业-实操
07-04 1754
TiDB Data Migration (DM) 是一款便捷的数据迁移工具，支持从与 MySQL 协议兼容的数据库（MySQL、MariaDB、Aurora MySQL）到 TiDB 的全量数据迁移和增量数据同步,同时可以进行表的过滤操作，并且可以进行分库分表的合并迁移。
Oracle数据库迁移之物理迁移
tomcat-oracle
08-15 242
　ORACLE数据库迁移有多种，今天先从物理迁移实验做起。 　　物理迁移比较简单，但是要求两个库的版本必须一样，且必须事先记录要迁移的库的SID、归档模式、数据文件、日志文件、控制文件、参数文件和密码文件。 　　迁移过程大致分为以下四步： 　　1、用迁移的参数文件启库到nomount状态。 　　数据库默认情况下是用$ORACLE_HOME/dbs/spfile<SID>.o...
数据迁移,从dm迁移到dm.
qq_41364256的博客
09-08 560
dm数据库迁移
数据库整体迁移
热门推荐
hc_ttxs的博客
06-22 1万+
1.迁移方法概述: 使用Navicat Premium 分别与源数据库和目标数据库建立连接,然后借助Navicat Premium自带的数据传输功能,实现Oracle数据库的迁移.其实跟从MySQL数据库迁移到oracle数据库是一个套路. O(∩_∩)O~ 听起来,是不是很简单,其实就是很简单!下边我就讲一下具体实现...
国产化改造，如何将Oracle数据完整迁移到DM数据库。
10-08
国产化改造，如何将Oracle数据完整迁移到DM数据库。 本文将详细介绍将Oracle数据完整迁移到DM数据库的过程，包括分析待移植系统、数据迁移、PL/SQL移植、移植结果校验、应用系统移植、测试和优化等几个方面的工作。...
oracle向达梦数据库迁移
01-17
Oracle12C 向达梦8（DM8）迁移是一个涉及多个步骤的技术过程，主要目的是将现有的Oracle数据库系统顺利地转换到达梦数据库平台，以利用其特定的优势或满足特定的业务需求。以下是对这个迁移过程的详细说明： 一、...
达梦数据库连接管理&数据迁移工具
03-13
达梦数据库可视化连接工具、DM管理工具、DTS数据迁移工具等。使用该工具可以连接管理达梦数据库、调试达梦增删查改等SQL语句、存储过程，迁移mysql、oracle、dm等数据库上的数据到达梦数据库里面。
一次物理表迁移实战
超威半导体
04-01 376
引言 本是集团新零售战略重要一环，也是线上线上奔跑最快的业务部分之一，的仓储也是业界领先的系统，创造了很多新的零售玩法，例如加工仓，暂养仓与冷链仓都进行了新的探索。在业务不断扩张的同时，仓储系统也面临诸多考验，例如各种大促，到2018年上半年可以说是举步维艰，很多历史包袱让业务稳定性堪忧，业务需求的挑战让整个团队举步维艰。仓储团队痛定思痛开始了慢慢的架构升级的道路。 关于仓储出库作业与出库单服务化...
11g数据库冷拷贝
congfengyan6269的博客
09-18 158
--原来已经安装了一个数据库，使用DBCA卸载--修改ORACLE_SID 、ORACLE_UNQNAME参数vi .bash_profileORACLE_SID=walnutORACLE_UNQNAME=walnut...
DM冷迁移
hayata的专栏
11-18 665
达梦数据库有很多备份和恢复的方式，但是有时候是需要冷迁移的。比如一个环境，就1台服务器，达梦数据文件的目录没有空间了，系统也没有做LVM 就是需要将数据文件、控制文件、重做日志文件移动到新的目录下。下面就简单演示一下。 1.环境介绍 系统 cents OS7.8 数据库文件路径 /dm/dmdata 新的数据库文件路径 /dm/dmdata01 2.复制数据库 利用cp命令，复制原数据库到新的目录 3.控制文件转换为文本文件 达梦数据库启动是dm....
完整的全库备份（供数据库迁移用）
cpgl40148的博客
11-14 123
这里的讲述一个完整的全库备份：备份中包括全部数据文件，控制文件，参数文件和归档日志文件。 这样就可以使用该备份进行数据库迁移。 ---进入rman： [oracle@oracle ~]$ rman target ...
达梦如何正确的冷备迁移
Flora
07-12 481
达梦数据库冷备迁移，修改路径，修改库名
达梦数据库冷备份与还原
zab151的博客
05-13 344
使用达梦数据库工具CONSOLE进行数据库备份还原
达梦数据库物理迁移实践
twotreeslanch的博客
05-13 425
在数据库的运维过程中，经常会进行硬件升级，更换主机或者依照当前生产库形成测试环境，这时就需要形成一个与原库相同的目标库。此时，进行物理迁移则是比较便捷的方法，其主要则是将源库相关文件直接复制到目标主机，将配置文件进行修改，与目标库相匹配，尔后在目标主机中注册服务，启动迁移后的实例。物理迁移操作上比较简单，要求两个库在版本上保持一致，以减少迁移风险和操作难度。 两个主机环境为64位centos 7.2，如下示： [root@dwm Desktop]# uname -a Linux dwm 3.10.0-116
datax迁移dm库模板
07-20
你可以使用DataX来迁移DM库的数据。以下是一个简单的模板，可以帮助你开始迁移过程： ```json { "job": { "setting": { "speed": { "channel": "3" } }, "content": [ { "reader": { "name": "dmreader", "parameter": { "connection": [ { "jdbcUrl": "jdbc:mysql://<DM库的连接地址>:<端口>/<数据库名称>", "querySql": "SELECT * FROM <表名>" } ], "username": "<用户名>", "password": "<密码>" } }, "writer": { "name": "mysqlwriter", "parameter": { "writeMode": "insert", "username": "<用户名>", "password": "<密码>", "column": [], "preSql": [], "connection": [ { "jdbcUrl": "jdbc:mysql://<目标MySQL数据库的连接地址>:<端口>/<数据库名称>", "table": "<目标表名>" } ] } } } ] } } ``` 请根据你的情况进行以下替换： - `<DM库的连接地址>`：替换为DM库的连接地址。 - `<端口>`：替换为DM库的端口号。 - `<数据库名称>`：替换为DM库的数据库名称。 - `<表名>`：替换为要迁移的表名。 - `<用户名>`：替换为DM库的用户名。 - `<密码>`：替换为DM库的密码。 - `<目标MySQL数据库的连接地址>`：替换为目标MySQL数据库的连接地址。 - `<目标表名>`：替换为目标MySQL数据库中的表名。 将以上模板保存为json文件，例如`dm_to_mysql.json`，然后使用以下命令执行迁移任务： ``` datax/bin/datax.py dm_to_mysql.json ``` 这将使用DataX将DM库中的数据迁移到目标MySQL数据库中的指定表中。请确保在执行之前已经安装并配置好了DataX。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值