使用空密码的本地帐户只允许进行控制台登陆_使用Oracle GoldenGate Marketplace实现数据快速同步ADW...

Oracle GoldenGate 是一个实现异构 IT 环境间数据实时数据集成和复制的综合软件包。该产品集支持高可用性解决方案、实时数据集成、事务更改数据捕获、运营和分析企业系统之间的数据复制、转换和验证。

GOLDENGATE 19.1 ON MARKETPLACE功能

Oracle GoldenGate for Oracle 19.1微服务版包括对Oracle数据库版本11g,12c,18c,19c,Cloud以及本地数据库的捕获和交付支持。允许从任何Oracle数据库平台和操作系统进行远程捕获,且无需在源端和目标端数据库安装任何介质。

GoldenGate on OCI微服务架构如下:

5c0b1a419a7c3453836b7b6a07d652a2.png

此文将逐步介绍如何使用Oracle GoldenGate Marketplace 搭建客户已有的Oracle数据库到Oracle ADW 业务数据平台的数据实时同步。

整体步骤大致如下:

1.在ORACLE CLOUD MARKETPLACE上部署GOLDENGATE微服务

2.配置源端/目标端数据库

3.Oracle GoldenGate 微服务配置

4.数据同步测试:ORACLE12C到ADW

ORACLE CLOUD MARKETPLACE上部署GOLDENGATE微服务

通过在Oracle Cloud Marketplace上使用Oracle GoldenGate微服务,可以轻松地建立和管理从本地到云,本地到本地以及云到云的数据实时复制。

1.从Oracle Cloud Marketplace主页:

https://cloudmarketplace.oracle.com/marketplace

ac7980573f851538a38795542ad8169a.png

2.使用“应用程序”下的搜索框并搜索关键字GoldenGate。

b8d68b763234885b0d228c980c1252f8.png

3.在Oracle Cloud Marketplace中找到Oracle GoldenGate微服务列表后,您可以使用提供的TerraForm Stack部署Oracle GoldenGate。

选择版本(19.1.0.0.1默认)选择需要部署到的Compartment,单击“Launch Stack”。

568070484545d3b4cbacc46ac92bba5c.png

4.填写Stack所需信息,其中包括Stack的名称,单击“下一步”。

2829e0112048fdeeb204405c8bc86fb8.png

5.填写以下详细信息。使用Oracle GoldenGate Microservices构建计算节点需要此信息。

显示名称 - 用于标识所有新OCI资源的显示名称。Oracle GoldenGate

主机DNS名称 - 新计算节点的域名服务的名称。

选择需要部署的Compartment. 

如果要创建新网络资源,请选中此复选框。

我们选择以有的网络资源  

65c52d550e0d00b4a443b07823dab897.png

6.选择计算资源 -支持的资源是VM.Standard2.4,VM.Standard2.8,VM.Standard2.16和VM.Standard2.24。这次选择VM.Standard2.4

分配公共IP  - 选中此复选框以指示新VM是否应具有公共IP地址。

部署1  - 名称(必填) - 第一个Oracle GoldenGate部署的名称。Source

部署1  - 数据库(必填) - Oracle 12c

部署2  - 名称(可选) - 第二个Oracle GoldenGate部署的名称。Target

部署2  - 数据库(可选) - Oracle 18c

粘贴SSH公钥 - 允许SSH访问作为opc用户的公钥

fa94acac146bd20bcf520a318b5ae762.png

7.在“确认”页面上,查看您提供的信息,然后单击“创建”。

0eb750653a830e4e7a9e84b276e6dd4a.png

8.名称为“OGG4ADW”Stack创建成功

037791d62bb0089438e021d015322cff.png

9.现在可以在计算节点Instances选项卡下查看Oracle GoldenGate Microservices计算节点。

08844c63b05cbc83f59fdbe4d8157d77.png

10.获取Oracle GoldenGate管理员密码

获取公共IP地址后,您必须获取Oracle GoldenGate管理员帐户(oggadmin)的密码。

Oracle GoldenGate管理员帐户(oggadmin)和密码保存在~/ogg-credentials.json文件里。

记录密码。

c5dca6260e24a5bddcfd29e9af7185e7.png

配置源端数据库

1.配置源或目标数据库以进行复制--源端数据库

源端数据库配置:在源端数据库打开附加日志以及OGG所需配置。

2.源端数据库:

创建OGG管理员c##ggadmin和测试用户SCOTT

3.测试用户SCOTT下,创建测试表EMP

SQL> show user

USER is "SCOTT"

SQL> CREATE TABLE EMP

       (EMPNO NUMBER(4) NOT NULL,

        ENAME VARCHAR2(10),

        JOB VARCHAR2(9),

        MGR NUMBER(4),

        HIREDATE DATE,

        SAL NUMBER(7, 2),

        COMM NUMBER(7, 2),

        DEPTNO NUMBER(2));  

Table created.

SQL> ALTER TABLE EMP ADD CONSTRAINT PK_EMPNO PRIMARY KEY(EMPNO);

Table altered.

SQL> select count(1) from emp;

  COUNT(1)

----------

         0

配置目标端端数据库

1.目标端数据库配置(ADW):

SQL> alter user ggadmin identified by account unlock;

User altered.

SQL> grant dwrole to ggadmin;

Grant succeeded.

SQL> grant pdb_dba to ggadmin;

Grant succeeded.

SQL> grant create session, resource, create view, create table to ggadmin;

Grant succeeded.

SQL> select name,value from v$parameter where name='enable_goldengate_replication';

NAME                                     VALUE

---------------------------------------- ----------

enable_goldengate_replication            TRUE

SQL> create user scott identified by ;

User created.

SQL> grant connect,resource,create table to scott;

Grant succeeded.

SQL> grant pdb_dba to scott;

Grant succeeded.

SQL> alter user scott quota unlimited on data;

User altered.

2.目标端数据库上创建测试用户SCOTT和EMP表:

SQL> show user

USER is "SCOTT"

SQL> CREATE TABLE EMP

  2         (EMPNO NUMBER(4) NOT NULL,

  3          ENAME VARCHAR2(10),

  4          JOB VARCHAR2(9),

  5          MGR NUMBER(4),

  6          HIREDATE DATE,

  7          SAL NUMBER(7, 2),

  8          COMM NUMBER(7, 2),

  9          DEPTNO NUMBER(2));

Table created.

SQL> desc emp

 Name                                      Null?    Type

 ----------------------------------------- -------- ----------------------------

 EMPNO                                     NOT NULL NUMBER(4)

 ENAME                                              VARCHAR2(10)

 JOB                                                VARCHAR2(9)

 MGR                                                NUMBER(4)

 HIREDATE                                           DATE

 SAL                                                NUMBER(7,2)

 COMM                                               NUMBER(7,2)

 DEPTNO                                             NUMBER(2)

 SQL> ALTER TABLE EMP ADD CONSTRAINT PK_EMPNO PRIMARY KEY(EMPNO);

Table altered.

 SQL> select count(1) from emp;

  COUNT(1)

----------

         0

ORACLE GOLDENGATE MICROSERVICES更改管理员密码

1.更改OGG默认管理员OGGADMIN密码

更改OGG默认管理员密码(例如oggadmin)是保护Oracle GoldenGate Microservices部署的首要任务。需要更改oggadmin的密码,您必须先在Service Manager和Administration Server中更改它。

浏览器中输入https:// 进入OGG管理页面如下:

单击”转到此网页”

20718f615a59d9f89abc848b631f3cc8.png

输入OGG管理用户名以及保存在~/ogg-credentials.json文件里的密码

d1119fac50c7bef35d3e6de02823ce5e.png

2.登录Service Manager后使用左上角的菜单图标打开菜单,从菜单中选择Administrator

在“oggadmin”编辑选项,更新oggadmin用户的密码,单击“提交”。

7f3997cc4a5d8430da902a1d7337748f.png

3.从Service Manager页面中,点击“Overview”回到控制台,

在部署框中选择Administration Server的端口号。这将导航到该部署的登录页面。

使用oggadmin用户及密码登录。也需要在每个部署的页面上更新oggadmin用户的密码。

分别点击Administration Server的端口9011和9021

fd8969987ec641aadaa7e70eaf735d7a.png

4.9011和9021的每个部署的页面上更新oggadmin用户的密码

cbf0d5feea5eefc98dbcd2deea90ffcc.png

5.Oracle GoldenGate Microservices计算节点中配置环境变量:

  点击下面的Source

01d72ab18f6ee4d4848215d89149b292.png

6.源端数据库为12cR2,所以ORACLE_HOME配置为/u01/app/client/oracle12

988256e61b4468fde58c43a9144bbd6d.png

7.目标端数据库为18c,所以ORACLE_HOME配置为/u01/app/client/oracle18

9c034d4046f8dfd55e1b810ffb279d2f.png

使用ORACLE GOLDENGATE MICROSERVICES创建数据库连接

创建配置源端数据库连接

1.通过点击Administration Server的端口号。9011 这将导航到该部署的登录页面

打开Overview页面左上角的上下文菜单,从上下文菜单中,选择“配置”。

在“数据库”选项卡中,单击加号(+)图标以添加新凭证。

源端因为是12c多租户数据库,所以我们分别创建连接CDB和PDB的数据库凭证如下:

6f040d656d01ca00361169c020d41cb3.png

2.点击测试按钮,进行数据库连接测试如下:CDB

连接成功会显示Checkpoint等信息

edb880d4bbc1a9471ba355a3e96a0253.png

3.点击测试按钮,进行数据库连接测试如下:PDB

44720aeb8d98a00a669e42ef94e1c09f.png

在源端添加SCHEMATRANDATA

4.添加用于连接到源数据库的凭证后,必须在源端上启用事务数据日志记录。

从Oracle Database 12.1和更高版本开始,您必须使用模式指定PDB数据库。 

即.   pdb1.scott

dea90002f68e056d35ebc970cb5ac64c.png

创建配置目标端数据库连接

1.通过点击Administration Server的端口号。9021 这将导航到该部署的登录页面

打开Overview页面左上角的上下文菜单,从上下文菜单中,选择“配置”。

在“数据库”选项卡中,单击加号(+)图标以添加新凭证。

目标端是ADW18c数据库,所以我们创建到数据库凭证如下:

d0898f565a1058d767950b143fc11d76.png

2.点击测试按钮,进行数据库连接测试如下:

连接成功会显示Checkpoint等信息

30c69417130c2a9c8685fc98758f26b2.png

在目标端添加检查点表

3.检查点表对于监视已应用于目标系统的检查点至关重要。无论使用何种复制,最佳做法是为目标系统启用检查点表。

Checkpoint选项中,点击添加

e72bafae403ef447ac8e15f6cb4828c5.png

使用ORACLE GOLDENGATE MICROSERVICES配置进程

目前,Oracle自治数据仓库云仅支持非集成模式的Replicat。

不支持集成模式Replicat,parallel Replicat和coordindated Replicat。

配置捕获进程

在开始复制之前,您必须设置捕获进程。

Oracle GoldenGate Microservices支持三种模式的捕获进程。

  • Classic Extract  -- OGG18c之后版本不建议使用,不支持同步到ADW/ATP

  • Integrated Extract

  • Initial Load Extract

配置EXTRACT进程

1.从源端管理控制台中选择添加Extract进程如下:

5b717840e75e71de34a0be9c9a3d962e.png

2.选择Integrated Extract进程,点击“Next”

20bbea1f3bb8d7428a1fff51d609d298.png

3.输入Extract进程相关信息如下:

进程名:ext

数据库连接信息:源端选择CDB连接(source),创建连接参照上述创建连接部分。

Trail文件名:eg

9c8d9e4930c49b6628e4df4ebc738676.png

4.选择需要注册的PDB1,点击“Next”

8ab75e9e70062a257bc25dbfdd8fc138.png

5.下一步填写进程相关配置信息如下:Table pdb1.scott.emp;

extract ext

useridalias oggadmin_pdb domain sourcepdb

exttrail eg

Table pdb1.scott.emp;

控制台上选择注册Extract进程到数据库,点击“创建和执行”

eb326fe06f215aba9dc652e1975e73a0.png

6.在控制台可以看到Extract进程。

b52520784918bf52b1e5be92c1c38d9e.png

配置REPLICAT进程

1.点击目标端管理服务器端口进入控制台,配置Replicat进程

96fb9bc248bf246144d55afe74077b59.png

2.点击添加Replicat进程

f28e84ec26b005ed7cb98214badae44e.png

3.选择Nonintegrated Replicat

5ba4d8306294b2f720bd9466e146a616.png

4.输入Replicat配置信息如下:目标端连接target,选择checkpoint table

a2ab202b965ab2311c4a88a8b0cc2367.png

5.下一步填写进程相关配置信息如下:

MAP pdb1.scott.emp, TARGET MSHUTOQY95TFZPE_ADW.SCOTT.emp;

点击“创建和执行”

replicat rep

useridalias target domain target

MAP pdb1.scott.emp, TARGET MSHUTOQY95TFZPE_ADW.SCOTT.emp;

73ba9acc7c26637bb8063b5a1b30d57d.png

6.在控制台可以看到Replicat进程。

f6f43df5ae5f4b9aeb309792451889c4.png

数据同步测试:ORACLE12C到ADW

源端插入数据

SQL> select count(1) from emp;

  COUNT(1)

----------

         0

SQL> INSERT INTO EMP VALUES(7369, 'SMITH',  'CLERK',     7902,

        sysdate,  800, NULL, 20);  

1 row created.

SQL> INSERT INTO EMP VALUES

        (7499, 'ALLEN',  'SALESMAN',  7698,

        sysdate, 1600,  300, 30);  

1 row created.

SQL> commit;

Commit complete.

SQL> select count(1) from emp;

  COUNT(1)

----------

         2

从Extract进程选项中选择“详细”

a91ab9df20e1fb7d7f73962c61fc4641.png

在统计栏中查看同步信息 2条数据成功的被捕获

9f065492183eee3573d09460373fab4d.png

在目标端确认数据同步成功

SQL> select * from emp;

EMPNO ENAME      JOB          MGR HIREDATE         SAL       COMM     DEPTNO

----- ---------- ---------- ----- --------- ---------- ---------- ----------

 7369 SMITH      CLERK       7902 24-JUL-19        800                    20

 7499 ALLEN      SALESMAN    7698 24-JUL-19       1600        300         30

通过点击目标端的进程详细,统计栏显示2条数据已经插入

e94b86f276db5eb257f8732bd7bb52a1.png

测试删除数据从源端数据库

SQL> select count(1) from emp;

  COUNT(1)

----------

         2

SQL> delete emp;

2 rows deleted.

SQL> commit;

Commit complete.

通过点击源端的进程详细,统计栏显示删除已经被捕获

3b13383e7d7920f2290e16b12aaeed14.png

目标端确认数据源已经被删除

SQL> select * from emp  ;

no rows selected

通过点击目标端的进程详细,统计栏显示删除已经被同步

ba49e9192ae353afcdee3c926463a3d4.png

扫描下方QR Code即刻预约ADW演示

f880794f2ac3c6b093acce4db68115ad.png

编辑:殷海英

62c62df7ca989c7886a342395980dcf6.png

42d6373d3f83da83d0e8f40795aa114a.png

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值