MTK 2.9.2 迁移Oracle 11g 至 openGauss 5.0.0操作指南

最新推荐文章于 2024-08-26 10:06:07 发布
最新推荐文章于 2024-08-26 10:06:07 发布
阅读量379 收藏 1
点赞数
文章标签： oracle 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/gallopingdb/article/details/132141806
版权

MTK 2.9.2 迁移Oracle 11g 至 openGauss 5.0.0操作指南

尚雷 openGauss 2023-08-04 18:01 发表于四川

前言: 最近在进行一些去O的验证测试，之前测试过MTK迁移Oracle到MogDB，正好测试下Oracle到openGauss的迁移，于是做了如下测试，并整理记录成文，还望对此熟悉的朋友多多指正。

一、简介

MTK全称(Database Migration Toolkit)，可进行Oracle/DB2/MySQL/openGauss/SqlServer/Informix等数据库异构迁移，支持Oracle/MySQL/DB2->openGauss的存储过程，函数，触发器，包迁移。MTK支持多种数据类型，并可在迁移时对性能进行调整，还支持结构和数据的分离。

本次采用恩墨公司MTK迁移工具，进行Oracle 11g到openGauss 5.0数据迁移测试。

本次迁移采用MTK最新版 2.9.2(2023年7月30日)。

MTK安装比较灵活，其可以安装在源端和目标端甚至可单独部署在一台可远程访问源端及目标端的单独服务器上。

MTK迁移Oracle数据库时，需在部署MTK的服务器上安装Oracle客户端 Oracle Instant Client。

二、环境概述

本次进行Oracle 11g到openGauss 5.0.0 迁移测试，如进行生产迁移，还需考虑更多步骤细节，详情请查看恩墨MTK官方文档[MTK 简介 | MogDB Docs]。

操作系统版本内核版本数据库类型工具版本字符集数据库端口
源端CentOS release 6.10 (Final)2.6.32-754.el6.x86_64单机Oracle 11.2.0.4AMERICAN_AMERICA.AL32UTF81521
目标端CentOS Linux release 7.9.2009 (Core)3.10.0-1160.83.1.el7.x86_64集群openGauss 5.0.0UTF826000
MTK服务器CentOS Linux release 7.9.2009 (Core)3.10.0-1160.83.1.el7.x86_64单机2.9.2

三、安装部署

3.1 安装Oracle客户端

MTK迁移Oracle数据库，需要在部署MTK的服务器上安装Oracle 11g客户端，本次选择采用rpm包来安装客户端。

登录https://www.oracle.com/database/technologies/instant-client/linux-x86-64-downloads.html选择下载Version 11.2.0.4.0版本客户端。

-- 1) 安装oracle-client rpm包
-- MTK服务器下载如下四个 oracle-client rpm包
[root@opensource-db soft]# ll
total 61400
-rw-r--r-- 1 root root 59865008 Jul 28 16:46 oracle-instantclient11.2-basic-11.2.0.4.0-1.x86_64.rpm
-rw-r--r-- 1 root root   610222 Jul 28 16:47 oracle-instantclient11.2-devel-11.2.0.4.0-1.x86_64.rpm
-rw-r--r-- 1 root root  1564169 Jul 28 16:47 oracle-instantclient11.2-jdbc-11.2.0.4.0-1.x86_64.rpm
-rw-r--r-- 1 root root   828333 Jul 28 16:48 oracle-instantclient11.2-sqlplus-11.2.0.4.0-1.x86_64.rpm
-- root 用户安装rpm包
[root@opensource-db soft]# rpm -ivh oracle*.rpm
-- oracle-instantclient11.2*.rpm 包安装目录在 /usr/lib/oracle 目录下
[root@opensource-db ~]# cd /usr/lib
[root@opensource-db lib]# tree oracle/
oracle/
└── 11.2
    └── client64
        ├── bin
        │   ├── adrci
        │   ├── genezi
        │   └── sqlplus
        ├── lib
        │   ├── glogin.sql
        │   ├── libclntsh.so -> libclntsh.so.11.1
        │   ├── libclntsh.so.11.1
        │   ├── libheteroxa11.so
        │   ├── libnnz11.so
        │   ├── libocci.so -> libocci.so.11.1
        │   ├── libocci.so.11.1
        │   ├── libociei.so
        │   ├── libocijdbc11.so
        │   ├── libsqlplusic.so
        │   ├── libsqlplus.so
        │   ├── ojdbc5.jar
        │   ├── ojdbc6.jar
        │   ├── orai18n.jar
        │   ├── orai18n-mapping.jar
        │   ├── ottclasses.zip
        │   └── xstreams.jar
        └── network
            └── admin
                └── tnsnames.ora
6 directories, 21 files

-- 2) 配置环境变量
-- omm 用户
[omm@opensource-db ~]$ cat >>/home/omm/.bash_profile<<EOF
export LD_LIBRARY_PATH=/usr/lib/oracle/11.2/client64/lib
export TNS_ADMIN=/usr/lib/oracle/11.2/client64/network/admin
EOF
[omm@opensource-db ~]$ source /home/omm/.bash_profile

-- 3) 创建sqlplus链接
-- 此时执行sqlplus会报错
[omm@opensource-db ~]$ sqlplus
-bash: sqlplus: command not found

# 问题原因，因为安装sqlplus客户端后，会链接生成/bin/sqlplus64
[omm@opensource-db ~]$ sqlplus64

SQL*Plus: Release 11.2.0.4.0 Production on Sun Jul 30 23:22:22 2023

Copyright (c) 1982, 2013, Oracle.  All rights reserved.

Enter user-name:

[omm@opensource-db ~]$ which sqlplus64
/bin/sqlplus64
[omm@opensource-db ~]$ ls -lrt /bin/sqlplus64
lrwxrwxrwx 1 root root 41 Dec  2 14:40 /bin/sqlplus64 -> /usr/lib/oracle/11.2/client64/bin/sqlplus

-- 解决办法，使用root用户执行如下操作
[root@opensource-db bin]# su - omm
Last login: Sun Jul 30 23:20:56 CST 2023 on pts/8
[omm@opensource-db ~]$ sqlplus

SQL*Plus: Release 11.2.0.4.0 Production on Mon Jul 31 10:09:30 2023

Copyright (c) 1982, 2013, Oracle.  All rights reserved.

Enter user-name: 
-- 此时可通过sqlplus使用tnsnames.ora字符串连接远程源端Oracle数据库。

3.2 部署MTK

3.2.1 下载MTK

登录 发布记录 | MogDB Docs网站，根据部署MTK服务器类型选择合适的MTK版本，本次选择最新版MTK2.9.2。

图片

将下载的mtk_2.9.2_linux_amd64.tar.gz软件上传到MTK服务器 omm用户。

3.2.2 校验MTK

使用sha256sum命令对下载的安装包进行校验，并和官网cheksum值进行比对。

[omm@opensource-db ~]$ sha256sum mtk_2.9.2_linux_amd64.tar.gz 
cc0cf328f0d4484f569e8520481dc4a3fd4d4acd46ac4a643c0e8e5ccdcfe551  mtk_2.9.2_linux_amd64.tar.gz

如下是官网mtk_2.9.2_linux_amd64.tar.gz chechsum值。

图片

3.2.3 解压MTK

MTK无需安装，只需解压即可。

[omm@opensource-db ~]$ tar -zxvf mtk_2.9.2_linux_amd64.tar.gz 
mtk_2.9.2_linux_amd64/CHANGELOG.md
mtk_2.9.2_linux_amd64/README.md
mtk_2.9.2_linux_amd64/example/db22mogdb.json
mtk_2.9.2_linux_amd64/example/db22mogdb.yaml
mtk_2.9.2_linux_amd64/example/db22mysql.json
mtk_2.9.2_linux_amd64/example/db22mysql.yaml
mtk_2.9.2_linux_amd64/example/informix2mogdb.json
mtk_2.9.2_linux_amd64/example/informix2mogdb.yaml
mtk_2.9.2_linux_amd64/example/mysql2mogdb.json
mtk_2.9.2_linux_amd64/example/mysql2mogdb.yaml
mtk_2.9.2_linux_amd64/example/oracle2mogdb.json
mtk_2.9.2_linux_amd64/example/oracle2mogdb.yaml
mtk_2.9.2_linux_amd64/example/pg2mogdb.json
mtk_2.9.2_linux_amd64/example/pg2mogdb.yaml
mtk_2.9.2_linux_amd64/example/sqlserver2mogdb.json
mtk_2.9.2_linux_amd64/example/sqlserver2mogdb.yaml
mtk_2.9.2_linux_amd64/mtk

[omm@opensource-db ~]$ ls -lrt
total 22188
drwx------ 2 omm omm     4096 Dec  2  2022 soft
-rw------- 1 omm omm    21524 Dec  6  2022 ab.sql
-rw------- 1 omm omm 22689582 Jul 17 12:48 mtk_2.9.2_linux_amd64.tar.gz
drwx------ 5 omm omm       84 Jul 28 16:58 bak
drwx------ 3 omm omm       18 Jul 30 00:37 oradiag_omm
drwx------ 5 omm omm      122 Jul 30 14:58 mtk_2.9.2_linux_amd64

3.2.4 申请license

MTK首次使用，需要申请license，可采用如下方式申请和应用license

-- 1） 申请license
-- 填写邮箱申请license
[omm@opensource-db ~]$ cd mtk_2.9.2_linux_amd64/
[omm@opensource-db mtk_2.9.2_linux_amd64]$ ./mtk license gen
License File Not Found (default license.json) 
The License code is invalid, start applying
Email: xxxx@xxx.com     -- 填写申请邮箱
Email: xxxx@xxx.com
Start applying for email xxxx@xxx.com authorization.

Start parsing the interface to return data.
Successful application for authorization. Please check the mail and save it as license.json.

-- 2）下载并上传license
-- 登录申请邮箱会接收到license.json文件，将该文件上传到 /home/omm/mtk_2.9.2_linux_amd64 目录下

-- 3） 应用license
[omm@opensource-db mtk_2.7.2_linux_amd64]$ ll
total 65280
-rw-r--r-- 1 omm omm    77321 Jul 17 12:38 CHANGELOG.md
drwxr-xr-x 2 omm omm     4096 Jul 31 10:19 example
-rw-r--r-- 1 omm omm     3241 Jul 30 16:39 license.json
-rwxr-xr-x 1 omm omm 66754240 Jul 17 12:38 mtk
-rw-r--r-- 1 omm omm     2052 Apr 28 10:33 README.md
-- 根据邮箱里收到的license文件上传到MogDB数据库服务器MTK安装目录下，应用license
[omm@opensource-db mtk_2.7.2_linux_amd64]$ ll
total 46480
-rw------- 1 omm omm    60343 Nov 29 12:56 CHANGELOG.md
drwx------ 2 omm omm     4096 Dec  2 13:29 example
-rw-r--r-- 1 omm omm     3304 Dec  2 13:51 license.json
-rwx------ 1 omm omm 47517936 Nov 29 12:54 mtk
-rw------- 1 omm omm     2052 Nov 28 11:00 README.md
[omm@opensource-db mtk_2.7.2_linux_amd64]$ ./mtk license gen
Using license file:  /home/mysql/mtk_2.9.2_linux_amd64/license.json
Name  : xxxx@xxxx.com
Expiry: 2023-08-29 16:39:17.148823801 +0800 CST
Version: 

MMMMMMMM               MMMMMMMMTTTTTTTTTTTTTTTTTTTTTTTKKKKKKKKK    KKKKKKK
M:::::::M             M:::::::MT:::::::::::::::::::::TK:::::::K    K:::::K
M::::::::M           M::::::::MT:::::::::::::::::::::TK:::::::K    K:::::K
M:::::::::M         M:::::::::MT:::::TT:::::::TT:::::TK:::::::K   K::::::K
M::::::::::M       M::::::::::MTTTTTT  T:::::T  TTTTTTKK::::::K  K:::::KKK
M:::::::::::M     M:::::::::::M        T:::::T          K:::::K K:::::K
M:::::::M::::M   M::::M:::::::M        T:::::T          K::::::K:::::K
M::::::M M::::M M::::M M::::::M        T:::::T          K:::::::::::K
M::::::M  M::::M::::M  M::::::M        T:::::T          K:::::::::::K
M::::::M   M:::::::M   M::::::M        T:::::T          K::::::K:::::K
M::::::M    M:::::M    M::::::M        T:::::T          K:::::K K:::::K
M::::::M     MMMMM     M::::::M        T:::::T        KK::::::K  K:::::KKK
M::::::M               M::::::M      TT:::::::TT      K:::::::K   K::::::K
M::::::M               M::::::M      T:::::::::T      K:::::::K    K:::::K
M::::::M               M::::::M      T:::::::::T      K:::::::K    K:::::K
MMMMMMMM               MMMMMMMM      TTTTTTTTTTT      KKKKKKKKK    KKKKKKK

Release version: v2.9.2
Git Commit hash: 26deaa81
Git Commit Date: 2023-07-17T04:38:19Z
Git Tag        : v2.9.2
Build timestamp: 20230717044023

3.3 目标端创建数据库及用户

[omm@xsky-node1 ~]$ gsql -d postgres -p 26000
gsql ((openGauss 5.0.0 build a07d57c3) compiled at 2023-03-29 03:07:56 commit 0 last mr  )
Non-SSL connection (SSL connection is recommended when requiring high-security)
Type "help" for help.

openGauss=# create tablespace t_xxxx RELATIVE LOCATION 'my_tablespace/t_xxxx';
CREATE TABLESPACE
-- 本次选择为数据库指定默认表空间
openGauss=# create database gaussdb WITH TABLESPACE = t_xxxx;
CREATE DATABASE
MogDB=# create user opuser with password "Opuser123";
NOTICE:  The encrypted password contains MD5 ciphertext, which is not secure.
CREATE ROLE
openGauss=# GRANT CREATE ON TABLESPACE t_xxxx to opuser;
GRANT
openGauss=# grant all on schema public to opuser;
GRANT
openGauss=#  alter user opuser sysadmin;
ALTER ROLE
openGauss=# grant create on database gaussdb to opuser;
GRANT

3.4 MTK初始化项目

使用MTK迁移，需要首先在MTK服务器进行项目的初始化，初始化方式如下

-- 通过mtk init-project --help命令可以查看mtk所支持的数据库
[omm@opensource-db ~]$ cd /home/omm/mtk_2.9.2_linux_amd64
[omm@opensource-db mtk_2.9.2_linux_amd64]$ ./mtk init-project --help
Initialise a typical mtk project tree. Top directory will be created under project base dir.

Usage:
  mtk init-project [project_name|--name project_name]  [flags]

Examples:
  mtk init-project ora2og --sourceDBType oracle --targetDBType mogdb

Flags:
      --detail                Whether to output full parameters, default output simple parameters
  -h, --help                  help for init-project
  -n, --name string           specify project name
  -s, --sourceDBType string   specify source database type
                              oracle, mysql, db2, sqlserver, dm, informix, opengauss, mogdb, postgresql (default "oracle")
  -t, --targetDBType string   specify target database type
                              opengauss, mogdb, mysql, postgresql, db2 (default "mogdb")

Global Flags:
      --caseSensitive int       Object case parameters in SQL statements.
                                1 - lower case 
                                2 - upper case 
                                3 - Keep it the same as the source database.
  -c, --config string           Set mtk config file. Support json,yaml. [env MTK_CONFIG] (default "mtk.json")
  -d, --debug                   Set the debug mode.
                                Not necessary for the normal usage. [env MTK_DEBUG]
      --disableIgnoreCase       Disable ignoring case queries
      --enableSyncCompTabPro    Enable Synchronize table compressed properties
      --file                    export to file
      --fileType string         Indicates the type of a file when data is to be exported to a file.
                                support csv,sql
      --license string          Specify the license file
      --noTerminalReport        The terminal does not print an overview of the migration report
  -p, --parallel int            Specify the parallelism. 
                                the degree of parallelism is now only useful when migrating table data and parallelism when creating an index. (default 1)
      --path string             Indicates the directory of a file to which data is to be exported. 
                                Default value is config.target.parameter.path. If not configured, the system default value ./data
                                Command Value > Config Value > MTK Default Value
      --preRun                  preRun check.
  -r, --reportFile string       Set mtk report file or dir. If it is a file, use the file directory. 
                                Default value is ./report
                                report directory format [./report/reportYYYYMMDDHHMISS] ./report/report20210101121314
      --schemas string          the Migrate schema,Separated by commas.(schema1,schema2,db1)
      --tableSkip stringArray   Define table split. Can be specified multiple times. 
                                format schema.tableName --tableSkip MTK.TABLE01 --tableSkip MTK.TABLE02
      --tables string           the Migrate tables,Separated by commas.(tab1,schema1.tab1)
-- -s 代表源端所支持的数据库类型
-- -t 代表目标端所支持的数据库类型
-- 通过以上内容可以看到mtk支持源端Oracle数据库和目标端openGauss数据库的迁移

-- 使用如下命令初始化项目
[omm@opensource-db mtk_2.9.2_linux_amd64]$ ./mtk init-project -s oracle -t opengauss -n ora2gaussdb
[omm@opensource-db mtk_2.9.2_linux_amd64]$ tree -f ora2gaussdb/
ora2gaussdb
├── ora2gaussdb/config
│   └── ora2gaussdb/config/mtk.json
├── ora2gaussdb/data
├── ora2gaussdb/report
└── ora2gaussdb/schema

4 directories, 1 file

3.5 编辑并检查配置文件

3.5.1 编辑配置文件

-- 可参照初始化后所提供的mtk.json模版来编辑配置文件
[omm@opensource-db ~]$ cd /home/omm/mtk_2.9.2_linux_amd64/ora2gaussdb/config
[omm@opensource-db config]$ ll
total 4
-rw------- 1 omm omm 1854 Jul 31 11:30 mtk.json
-- 编辑mtk.json配置文件
[omm@opensource-db mtk_2.9.2_linux_amd64]$ vim ora2mg/config/mtk.json
-- 编辑后的文件如下
{
  "source": {
    "type": "oracle",   -- 源端数据类型
    "connect": {
      "version": "11.2.0.4",    -- 源端数据库版本 
      "host": "10.110.8.204",   -- 源端数据库地址
      "user": "system",         -- 源端用户，需要有相应权限
      "port": 1521,             -- 源端监听端口
      "password": "xxxx",       -- 源端用户密码
      "dbName": "silk",         -- 源端数据库名称
      "dsn": "",
      "charset": "UTF8",        -- 源端字符集
      "clientCharset": "" 
    },
    "parameter": {
      "charAppendEmptyString": false
    }
  },
  "target": {
    "type": "opengauss",        -- 目标端数据库类型
    "connect": {
      "version": "5.0.0",       -- 目标端数据库版本
      "host": "10.110.7.39",    -- 目标端数据库地址
      "user": "opuser",         -- 目标端用户
      "port": 26000,            -- 目标段监听端口
      "password": "Opuser123",  -- 目标端用户密码
      "dbName": "gaussdb",      -- 目标端数据库名称
      "dsn": "", 
      "charset": "UTF8",        -- 目标端数据库字符集
      "datCompatibility": "A",
      "clientCharset": "UTF8"
    },
    "parameter": {
      "parallelInsert": 4,      -- 数据插入的并行度
      "dropSchema": false,
      "dropExistingObject": false,
      "truncTable": false,
      "colKeyWords": {
        "STREAM": 1,
        "TID": 1
      },
      "objKeyWords": {
        "STREAM": 1,
        "TID": 1
      },
      "caseSensitive": 0,
      "quoteMark": false,
      "path": "ora2gaussdb/data",          -- 存放迁移过程中源端及目标端的相关信息
      "schemaPath": "ora2gaussdb/schema",  -- 存放迁移过程中的一些视图、存储过程、包等信息
      "dataPath": "ora2gaussdb/data",
      "errDataPath": "",
      "fileType": "sql",
      "fileSize": "10240MiB",
      "csvHeader": false,
      "csvNullValue": "",
      "csvFieldDelimiter": ",",
      "csvOptionallyEnclosed": "\"",
      "excludeSysTable": [],
      "remapSchema": {
        "XXXXX": "XXXXX"
      },
      "remapTable": {},
      "remapTablespace": {},
      "enableSyncTabTbsPro": false,
      "enableSyncCompTabPro": false,
      "timeFormat": "HH:MI:SS",
      "dateFormat": "YYYY-MM-DD",
      "dateTimeFormat": "YYYY-MM-DD HH24:MI:SS",
      "timeStampFormat": "YYYY-MM-DD HH24:MI:SSXFFFFFF",
      "timeStampZoneFormat": "YYYY-MM-DD HH24:MI:SSXFFFFFF TZR",
      "noSupportPartTabToNormalTab": true,
      "ignoreDB2PartInclusive": false,
      "igNotSupportIntervalPart": false,
      "igErrorData": false,
      "enableBatchCommit": false,
      "ignoreTabPartition": false,
      "autoAddMaxvaluePart": false,
      "autoAddMySQLAutoIncr": false,
      "autoAddMySQLAutoIncrTabList": [
        "TABLE_1",
        "SCHEMA1.TABLE_1"
      ],
      "ignoreNotSupportDefault": false,
      "replaceZeroDate": "",
      "virtualColToNormalCol": false,
      "virtualColConv": {
        "LEFT(HOST,POSSTR(HOST,':')-1)": "SPLIT_PART(HOST,':',1)",
        "TRUNC_TIMESTAMP(SNAPTIME,'HH')+ (MINUTE(SNAPTIME)/10*10 +10) MINUTES": "date_trunc('hour',snaptime) + (date_part('minute',snaptime) / 10 +1)::int * interval '10 min'"
      },
      "convertPackageMethod": "package",
      "convertOracleIntegerToNumeric": false,
      "enableOgBlobClob": false,
      "enableConvertSrid": false,
      "defaultSrid": "4326",
      "seqLastNumAddNum": 0,
      "skipColumnType": {
        "COL_TYPE_1": 1,
        "COL_TYPE_2": 2
      },
      "skipColumnName": {
        "SCHEMA1.TAB_01.COL1": 1,
        "SCHEMA1.TAB_01.COL2": 2
      },
      "templateSeqName": "{{.TabName}}_{{.ColName}}_SEQ",
      "charAppendEmptyString": false,
      "tableOptions": {},
      "indexOptions": {}
    }
  },
  "object": {
    "tables": [],
    "schemas": [
    "XXXXX"
    ],
    "excludeTable": {
      "SCHEMA1": [
        "TABLE_SKIP1",
        "TABLE_DUTY_LOG*",
        "^TABLE_DUTY_LOG*",
        "^TABLE_DUTY_LOG.*$"
      ],
      "SCHEMA2": [
        "TABLE_SKIP1"
      ]
    },
    "tableSplit": {
      "SCHEMA1": {
        "TAB_1": [
          "ID < 10000",
          "ID < 90000 AND ID >=10000",
          "ID >= 90000"
        ]
      },
      "SCHEMA2": {
        "TAB_1": [
          "ID < 10000",
          "ID < 90000 AND ID >=10000",
          "ID >= 90000"
        ]
      }
    }
  },
  "limit": {
    "parallel": 4,
    "fetchSize": 1000,
    "batchSize": 1000,
    "bufferSize": 8,
    "cpBufferSize": 8,
    "oracleSelectParallel": 2,
    "channelCacheNum": 100000,
    "limit": 0
  },
  "dataOnly": false,
  "schemaOnly": false,
  "disableTableDataComp": false,
  "disableCollStatistics": false,
  "reportFile": "ora2gaussdb/report",     -- 迁移生成报告的目录
  "debug": false,
  "disableIgnoreCase": false,
  "disableSelectPart": false,
  "disableFKCons": false,
  "disableSyncIdxAfterData": false
}

-- mtk.json配置文件具体内容可参照官方文档 https://docs.mogdb.io/zh/mtk/v2.0/mtk-config

以下是mtk部分配置参数及含义描述：

名称定义类型含义描述
sourceOption源数据库配置信息.
targetOption目标数据库配置信息.
limitLimit迁移并发配置.
objectObject迁移对象配置.
dataOnlybool是否只迁移数据.
schemaOnlybool是否只迁移数据结构.
disableTableDataCompbool当数据迁移完成后，MTK会统计两边的行数进行对比.
disableCollStatisticsbool当数据迁移完成后，MTK会收集目标端统计信息.
reportFilestring迁移报告目录.
debugbool是否开启日志debug模式.
preRunbool预运行.
testbool试迁移.
disableIgnoreCasebool关闭在源库查询忽略大小写功能.
disableSelectPartbool关闭分区查询功能.
disableFKConsbool禁用外键同步.
disableSyncIdxAfterDatabool在一次性迁移模式下禁用在同步完单个表数据后立即创建这个表的索引. 改为全部完全部迁移表数据后,在进行同步索引
disablePrintMigDataProgressbool关闭打印迁移表数据进度功能.打印进度影响迁移性能

3.5.2 检查配置文件

-- 通过预运行检查配置文件有无错误
[omm@opensource-db mtk_2.9.2_linux_amd64]$ ./mtk check-config -c ora2gaussdb/config/mtk.json --preRun
use config : ora2gaussdb/config/mtk.json
There is no error in the configuration file
# 出现如上信息提示配置文件配置正确

# 注意，如果只迁移schema，在配置object时，不能将table和schema同时写，否则检查时会报如下错误：
[omm@opensource-db mtk_2.9.2_linux_amd64]$ ./mtk check-config -c ora2gaussdb/config/mtk.json --preRun
use config : ora2gaussdb/config/mtk.json
Error :  schema and tables cannot exist together 
schema and tables cannot exist together

四、执行迁移

4.1 迁移命令

迁移可以选择只迁移schema、迁移整个库，或者迁移数据库某些表对象。

-- 通常有如下迁移方式
-- 整库迁移
mtk -c ora2gaussdb/config/mtk.json

-- 只迁移schema
mtk -c ora2gaussdb/config/mtk.json --schemaOnly

-- 只迁移数据
mtk -c ora2gaussdb/config/mtk.json --file --dataOnly

-- 还可以根据需要对部分对象进行迁移
-- 可参加官方文档：https://docs.mogdb.io/zh/mtk/v2.0/mtk-usage (分步迁移)


-- 执行迁移后，还可以通过如下方式生成相应迁移报告
-- 导出整库迁移报告
mtk -c ora2gaussdb/config/mtk.json --file

-- 导出仅含schema的信息报告
mtk -c ora2gaussdb/config/mtk.json --file --schemaOnly

-- 导出仅含数据的信息报告
mtk -c ora2gaussdb/config/mtk.json --file --dataOnly

4.1 迁移schema

[omm@opensource-db ~]$ cd mtk_2.9.2_linux_amd64/
[omm@opensource-db mtk_2.9.2_linux_amd64]$ ./mtk -c ora2gaussdb/config/mtk.json --schemaOnly
-- 迁移过程部分信息如下
CREATE TRIGGER REP_BUSI_FOLLOW_UP_INFO BEFORE INSERT OR UPDATE ON XXXXX.BUSI_FOLLOW_UP_INFO FOR EACH ROW EXECUTE PROCEDURE XXXXX.TRIG_FCT_REP_BUSI_FOLLOW_UP_INFO();
 error code: 42601 msg:syntax error at or near "IS"" function=doTask line=558 file="mtk/pkg/mtk/mtk_task.go" taskID=1685880346911969280
......
time="2023-07-31 13:09:49.511669" level=info msg="CreateTrigger XXXXX.T_BUSI_INFO_RECORD" function=doTask line=538 file="mtk/pkg/mtk/mtk_task.go" taskID=1685880346911969280
time="2023-07-31 13:09:54.864476" level=info msg="AlterSequence XXXXX.S_Z_GRILLS_DEALER_INFO" function=doTask line=538 file="mtk/pkg/mtk/mtk_task.go" taskID=1685880346911969280
time="2023-07-31 13:09:54.868065" level=info msg="Processing AlterSequence finish" function=doTask line=450 file="mtk/pkg/mtk/mtk.go" taskID=1685880346911969280
time="2023-07-31 13:09:54.873779" level=info msg="Finish end" function=Stop line=250 file="mtk/pkg/mtk/mtk.go" taskID=1685880346911969280
......

4.2 执行结果

迁移执行后，会在末尾生成执行结果，如下所示

*********************************
Database Migration Toolkit Report
*********************************

--------------
Report Summary
--------------

|            Name                |        Value        |
|--------------------------------|---------------------|
| Source Database Type           | oracle              |
| Source Database Version        | 11.2.0.4.0          |
| Source Database Charset        | AL32UTF8            |
| Source Database DatCompat      |                     |
| Target Database Type           | opengauss           |
| Target Database Version        | 5.0.0               |
| Target Database Charset        | UTF8                |
| Target Database DatCompat      | A                   |
| StartTime                      | 2023-07-31 13:09:31 |
| EndTime                        | 2023-07-31 13:09:54 |
| Time                           | 22 s                |
| Status                         | finish              |
| MTK Version                    | v2.9.2_26deaa81     |

-----------------------
ObjectName Type Summary
-----------------------

+------------------+-------------------+-------------------+--------+-----------+-------------+-------------+-------------+--------------------|-------------+
|       Type       |     StartTime     |      EndTime      | Status | Total Num | Success Num | Warring Num | Failed  Num |Failed(Invalid) Num | Time        |
+------------------+-------------------+-------------------+--------+-----------+-------------+-------------+-------------+--------------------|-------------+
|Schema            |2023-07-31 13:09:31|2023-07-31 13:09:31|finish  |1          |1            |0            |0            |0                   |14 ms        ｜
|Sequence          |2023-07-31 13:09:31|2023-07-31 13:09:32|finish  |477        |477          |0            |0            |0                   |276 ms       ｜
|ObjectType        |2023-07-31 13:09:32|2023-07-31 13:09:32|finish  |0          |0            |0            |0            |0                   |72 ms        ｜
|Queue             |2023-07-31 13:09:32|2023-07-31 13:09:32|finish  |0          |0            |0            |0            |0                   |30 ms        ｜
|Table             |2023-07-31 13:09:32|2023-07-31 13:09:43|finish  |558        |67           |491          |0            |0                   |11 s 424 ms  ｜
|Index             |2023-07-31 13:09:43|2023-07-31 13:09:44|finish  |1059       |1056         |1            |2            |0                   |693 ms       ｜
|Constraint        |2023-07-31 13:09:44|2023-07-31 13:09:44|finish  |485        |482          |2            |1            |0                   |511 ms       ｜
|DBLink            |2023-07-31 13:09:44|2023-07-31 13:09:44|finish  |9          |0            |0            |9            |0                   |5 ms         ｜
|Synonym           |2023-07-31 13:09:44|2023-07-31 13:09:44|finish  |10         |9            |0            |1            |0                   |38 ms        ｜
|View              |2023-07-31 13:09:44|2023-07-31 13:09:44|finish  |0          |0            |0            |0            |0                   |38 ms        ｜
|MaterializedView  |2023-07-31 13:09:44|2023-07-31 13:09:45|finish  |18         |0            |0            |18           |0                   |225 ms       ｜
|Function          |2023-07-31 13:09:45|2023-07-31 13:09:46|finish  |3          |1            |0            |2            |0                   |1 s 725 ms   ｜
|Procedure         |2023-07-31 13:09:46|2023-07-31 13:09:48|finish  |20         |3            |0            |14           |3                   |1 s 337 ms   ｜
|Package           |2023-07-31 13:09:48|2023-07-31 13:09:48|finish  |0          |0            |0            |0            |0                   |21 ms        ｜
|Trigger           |2023-07-31 13:09:48|2023-07-31 13:09:54|finish  |900        |875          |0            |25           |0                   |6 s 436 ms   ｜
|AlterSequence     |2023-07-31 13:09:54|2023-07-31 13:09:54|finish  |477        |477          |0            |0            |0                   |134 ms       ｜
+------------------+-------------------+-------------------+--------+-----------+-------------+-------------+-------------+--------------------|-------------+

[2023-07-31 13:09:54.877143]  INFO reportDir : ora2gaussdb/report/report_20230731130954 function=PrintReport line=364 file=mtk/cmd/mtk/cmd/mtk.go
[2023-07-31 13:09:55.154613]  INFO the text     report : ora2gaussdb/report/report_20230731130954.txt function=HTMLReportToFIle line=135 file=mtk/pkg/report/report.go
[2023-07-31 13:09:55.990968]  INFO the warring  report : ora2gaussdb/report/report_20230731130954.warring file=mtk/pkg/report/report.go function=HTMLReportToFIle line=142
[2023-07-31 13:09:56.06896]  INFO the error    report : ora2gaussdb/report/report_20230731130954.err function=HTMLReportToFIle line=149 file=mtk/pkg/report/report.go
[2023-07-31 13:09:56.092667]  INFO the excel    report : ora2gaussdb/report/report_20230731130954.xlsx function=HTMLReportToFIle line=156 file=mtk/pkg/report/report.go

4.3 查看报告

-- 迁移结束后，会生成如下一些执行结果
-- report 各文件及目录含义
ora2mg/report/report_20230731130954/index.html	html报告
ora2mg/report/report_20230731130954.txt	        文本报告
ora2mg/report/report_20230731130954.warring	    只包含警告信息的文本报告
ora2mg/report/report_20230731130954.err	        只包含错误信息的文本报告
ora2mg/report/report_20230731130954.xlsx        包含导出过程的xlsx文件信息报告
ora2mg/report/report_20230731130842.log         导出过程日志记录

将report 目录report_xxx目录打包下载到本地电脑，然后解压后打开index.html文件，可查看导出的相关报告信息。

图片

4.4 迁移数据

-- 采用如下方式迁移数据
[omm@opensource-db mtk_2.9.2_linux_amd64]$ ./mtk -c ora2gaussdb/config/mtk.json --file --dataOnly
-- 部分执行结果如下
time="2023-07-31 16:40:20.053455" level=info msg="Processing TableData XXXX.USER_xxxx_xxx_RECORD Reader Finish" function=func1 line=650 file="mtk/pkg/mtk/mtk_table_data.go" taskID=1685932911041187840
time="2023-07-31 16:40:20.055646" level=info msg="Processing TableData XXXX.USER_xxx_VERIFY_RECORD Writer Finish" function=func1 line=676 file="mtk/pkg/mtk/mtk_table_data.go" taskID=1685932911041187840
....
*********************************
Database Migration Toolkit Report
*********************************

--------------
Report Summary
--------------

|            Name                |        Value        |
|--------------------------------|---------------------|
| Source Database Type           | oracle              |
| Source Database Version        | 11.2.0.4.0          |
| Source Database Charset        | AL32UTF8            |
| Source Database DatCompat      |                     |
| Target Database Type           | file                |
| Target Database Version        | 5.0.0               |
| Target Database Charset        | UTF8                |
| Target Database DatCompat      | A                   |
| StartTime                      | 2023-07-31 16:38:24 |
| EndTime                        | 2023-07-31 16:40:42 |
| Time                           | 2 m 18 s            |
| Status                         | finish              |
| MTK Version                    | v2.9.2_26deaa81     |



-----------------------
Table Data Summary
-----------------------

+----------------------------------------+----------------------------------------+-------------------+-------------------+------+--------+----------+----------+----------+----------+
|       SrcName                          | TgtName                                |     StartTime     |      EndTime      |  Time| Status | Select   | Insert   |Ignore    | Size     |
+----------------------------------------+----------------------------------------+-------------------+-------------------+------+--------+----------+----------+----------+----------+
|XXXX.MLOG$xxxxx     |XXXX.MLOG$xxxxx      |2023-07-31 16:39:38|2023-07-31 16:39:38|3 ms  |succeed |         0|         0|         0|         0|
|XXXX.XXXX                  |XXXX.XXXX                  |2023-07-31 16:40:32|2023-07-31 16:40:32|3 ms  |succeed |         0|         0|         0|         0|
......
|XXXX.SYS_TEMP_FBT                   |XXXX.SYS_TEMP_FBT                   |2023-07-31 16:38:40|2023-07-31 16:38:40|0 ms  |warring |         0|         0|         0|         0|
|XXXX.RUPD$_WT_OSS_ADMIN     |XXXX.RUPD$_WT_OSS_ADMIN     |2023-07-31 16:38:40|2023-07-31 16:38:40|0 ms  |warring |         0|         0|         0|         0|
|XXXX.RUPD$_WT_OSS_ADMIN_ROLE        |XXXX.RUPD$_WT_OSS_ADMIN_ROLE        |2023-07-31 16:38:40|2023-07-31 16:38:40|0 ms  |warring |         0|         0|         0|         0|
+----------------------------------------+----------------------------------------+-------------------+-------------------+------+--------+----------+----------+--------+----------+

-----------------------
ObjectName Type Summary
-----------------------

+------------------+-------------------+-------------------+--------+-----------+-------------+-------------+-------------+--------------------|-------------+
|       Type       |     StartTime     |      EndTime      | Status | Total Num | Success Num | Warring Num | Failed  Num |Failed(Invalid) Num | Time        |
+------------------+-------------------+-------------------+--------+-----------+-------------+-------------+-------------+--------------------|-------------+
|TableData         |2023-07-31 16:38:24|2023-07-31 16:40:42|finish  |558        |548          |10           |0            |0                   |2 m 17 s 921 ms｜
|AlterSequence     |2023-07-31 16:40:42|2023-07-31 16:40:42|finish  |477        |477          |0            |0            |0                   |189 ms       ｜
+------------------+-------------------+-------------------+--------+-----------+-------------+-------------+-------------+--------------------|-------------+

gallopingdb
关注
Linux下Oracle 11g数据库安装（RAC）
weixin_52805903的博客
02-19 350
oracle实战的文章，文章主要包括： Oracle 11g/12c/19c各类型数据库的安装、imp/impdp;exp/expdp， rman,dg,ogg,性能优化等内容的学习
MogDB/openGauss 生态工具-MTK(Migration ToolKit) 数据库迁移
Enmotech的博客
07-20 1138
点击上方"蓝字"关注我们，享更多干货！一、准备环境1. 源库创建（Oracle）创建Oracle 11.2.0.4docker pull registry.cn-hangz...
【参赛作品21】MogDB/openGauss 生态工具-MTK(Migration ToolKit) 数据库迁移
Gauss松鼠会
07-08 1599
一、准备环境 1. 源库创建（Oracle） 创建Oracle 11.2.0.4 ocker pull registry.cn-hangzhou.aliyuncs.com/lhrbest/oracle_11g_ee_lhr_11.2.0.4:1.0 docker run -itd --name oracle -h oracle --privileged=true -p 1521:1521 -p 222:22 -p 1158:1158 lhrbest/oracle_11g_ee_lhr_11.2.0.4.
Oracle迁移至openGauss的工具：ora2op的安装配置
最新发布
Gauss松鼠会
08-26 1018
本工具是使用perl，在安装时会遇到各种问题，解决方式也是一点一点摸索，各种包依赖安装不成功。大家在参考使用时需结合实际情况。 使用的操作系统是centos7.9。
如何使用MTK工具进行数据库移植
01-05
有人用到这个工具了我共享一下 如何使用MTK工具进行数据库移植
Ora2Pg工具迁移Oracle到openGauss
IT邦德
11-14 2602
本文详细阐述了Ora2Pg工具迁移Oracle到openGauss的全过程。
通过MTK迁移Oracle到EDB实战指南
dixialieren的专栏
04-14 4166
本文以实战的方式详细介绍了使用MTK工具迁移Oracle数据库到Enterprisedb的流程，并详细介绍了迁移驱动安装配置及迁移过程中的注意事项。
构建最高可用Oracle数据库系统 Oracle 11gR2 RAC管理、维护与性能优化
05-11
2.9.2启动主机Xen内核 2.9.3 Xen虚拟机创建网络环境 2.9.4创建Xen存储服务器 2.9.5创建Xen数据库服务器 2.10本章小结 第3章 Clusterware集群软件 3.1 Grid Infrastructure架构 3.1.1 GI的特点 3.1.2 GI的...
fuse-devel-2.9.2-11.el7.x86_64.rpm
11-30
离线安装包，亲测可用
fuse-2.9.2-11.el7.x86_64.rpm
11-30
离线安装包，亲测可用
loki2.9.2镜像
11-09
loki2.9.2镜像
MTK手机驱动v2.0.1.032位64位
08-07
小编提供的MTK手机驱动，包含有适用于Win 32位和64位系统的两个版本驱动，您在安装时只要选对版本，就不会有错，安装完驱动，你的电脑就能正常识别MTK手机了 MTK手机驱动安装方法 1、根据自己所用的系统版本，选择相应的驱动安装，如：win7 32位（驱动——Win7——“dpinst.exe”） 2、因本驱动没有数字签名，文件在安装时，系统会弹出几次安全框，如下操作（始终安装此驱动
MTK智能机USB驱动+刷机必备驱动大全
03-14
MTK智能机USB驱动+刷机必备驱动大全，支持XP_x86，Win7_x86，Win7_x64，Vista_x86，Vista_x64，amd64，自动安装板
BenchmarkSQL 5.0 压测 openGauss 5.0.0 案例分享
gallopingdb的博客
08-10 1652
BenchmarkSQL 5.0 压测 openGauss 5.0.0 案例分享 尚雷 openGauss 2023-08-07 18:00 发表于中国香港 一、前言 本次BenchmarkSQL 压测openGauss仅作为学习使用压测工具测试tpcc为目的，并不代表数据库性能如本次压测所得数据。实际生产性能压测，还需结合服务器软硬件配置、数据库性能参数调优、BenchmarkSQL 配置文件参数相结合，是一个复杂的过程。 1.1 BenchmarkSQL 工具介绍 BenchmarkSQL 是
【openGauss】一种可能是目前最快的从ORACLE同步数据到MogDB(openGauss)的方式
DarkAthena的博客
09-15 560
目前openGauss支持oracle中的绝大部分数据类型，基本上不用考虑类型转换的问题。所以从oracle到MogDB(openGauss)的数据同步无非就是从oracle里查出来再插入到MogDB(openGauss)中，只是查出来的结果是存成文件还是放内存而已。
openGauss学习笔记-93 openGauss 数据库管理-访问外部数据库-oracle_fdw
超哥的博客
10-08 735
openGauss的fdw实现的功能是各个openGauss数据库及远程服务器（包括数据库、文件系统）之间的跨库操作。目前支持的远程服务器类型包括Oracle、MySQL（MariaDB）、openGauss（postgres_fdw）、file_fdw 、dblink。 oracle_fdw（foreign data wrapper for oracle）用于Oracle的外部数据包装器，是一款开源插件。openGauss基于开源的oracle_fdw Release 2.2.0 版本进行开发适配。
【openGauss】openGauss补完计划一之ORACLE兼容函数
DarkAthena的博客
12-29 1043
一、前言 2021年12月23号到2021年12月24号的数据技术嘉年华直播中，不少国产数据库厂商都在说兼容oracle的语法到了百分之多少。我想着，既然都说兼容，那我能不能直接把我之前写的一些奇奇怪怪的功能给移植到这些数据库上去？ 稍微研究了一下这些国产数据库，发现很多都是基于mysql或者postgresql。也就是说，理论上，只要某个基于postgresql的数据库做了兼容oracle的相关对象，那么理论上也应该能移植到另一个基于postgresql的数据库上去。 但一个人去对比这么多数据库扣那几百上
opengauss编译和使用oracle_fdw
howard_shooter的博客
04-27 801
有趣的是，即使oracle侧的表没有定义主键，opengauss侧定义的外表也要求至少一个列有options(key 'true')属性，否则是没法进行update和delete操作的，而且即使opengauss测试定义了key列，oracle侧这个列有重复也不能update和delete，所以，最好oracle侧的表定义了主键。这条件语句，创建了一个名为fdw_test01的外部表，它的列名和类型定义，应该与远程oracle表一一对应或兼容（其实列名甚至列数不同也可以，不过最好不要这样做）。
山石云·格WebUI V2.9.2用户指南：授权与安全操作详解
山石云·格WebUI手册V2.9.2是专为Hillstone Networks公司提供的云·格CloudHive安全产品的用户界面指南。该手册版本适用于2022年，版权归Hillstone Networks所有，强调了软件的使用须遵循许可协议或非披露协议，禁止...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值