使用 Oracle 数据库 10g内部的 ETL 基础架构

使用 Oracle 数据库 10 g 内部的 ETL 基础架构

http://www.oracle.com/technology/global/cn/obe/10gr2_db_single/bidw/etl2/etl2_otn.htm



--在关于Change Data Capture(一)中介绍了CDC的一些基本概念和类型。这篇文章主要是通过一个实际的例子来演示实现同步模式的CDC的基本步骤。
-- Create table
create table SALES
(
   ID               NUMBER,
   PRODUCTID NUMBER,
   PRICE         NUMBER,
   QUANTITY   NUMBER
)
--url:http://www.ningoo.net/html/tag/cdc
--2.1.首先在source database创建一个用户作为发布者
create user cdcpub identified by cdcpub;
--2.2.授予相应的权限

grant execute_catalog_role to cdcpub;
grant select_catalog_role to cdcpub;
grant create table to cdcpub;
grant create session to cdcpub;
grant dba to cdcpub;
grant execute on dbms_cdc_publish to cdcpub; --出错
--3.1
alter system set java_pool_size=48M;

--4.1
grant all on system.sales to cdcpub;   --出错
--4.2
begin
dbms_cdc_publish.create_change_set(
change_set_name =>'test_cdc',
description =>'change set for ning.sales',
change_source_name =>'SYNC_SOURCE');
end;
--4.3
begin
dbms_cdc_publish.create_change_table(
owner =>'cdcpub',
change_table_name=>'sales_ct',
change_set_name=>'test_cdc',
source_schema=>'system',
source_table=>'sales',
column_type_list=>'id int,productid int,price number(10,2),quantity int',
capture_values=>'both',
rs_id=>'y',
row_id=>'n',
user_id=>'n',
timestamp=>'n',
object_id=>'n',
source_colmap=>'y',
target_colmap=>'y',
options_string=>'tablespace users',
ddl_markers=>'n');--Oracle11 新添加参数
end;
--5.1
create user cdcsub identified by cdcsub;
grant create session to cdcsub;
grant create table to cdcsub;
grant select on cdcpub.sales_ct to cdcsub;
--5.3.创建订阅
begin
dbms_cdc_subscribe.create_subscription(
change_set_name=>'test_cdc',
description=>'change data for sales',
subscription_name=>'sales_sub');
end;
--5.4.订阅具体的source table和column
begin
dbms_cdc_subscribe.subscribe(
subscription_name=>'sales_sub',
source_schema=>'system',
source_table=>'SALES',
column_list=>'id,productid,price,quantity',
subscriber_view=>'TCDC_VIEW_SALES');
--subscriber_view=>'sales_view');
end;
--5.5.激活订阅 不管订阅包含一个source table还是多个,只需要执行一次激活即可。
begin
dbms_cdc_subscribe.activate_subscription(
subscription_name=>'SALES_SUB');
end;
--5.6.扩展订阅窗口   在源表数据变化后,变化的数据在订阅端需要执行extend_window后才能看见
begin
dbms_cdc_subscribe.extend_window(
subscription_name=>'SALES_SUB');
en  

转载于:https://www.cnblogs.com/rootq/archive/2012/09/03/2668268.html

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
ETL是一种常用的数据转换工具,能够实现不同数据库之间的数据转换。下面介绍一下如何使用ETL进行MySQL与Oracle数据库转换。 1. 安装ETL工具 ETL工具有很多种,可以选择一款适合自己的进行安装。常见的ETL工具有Talend、Kettle、Pentaho等。 2. 连接MySQL数据库ETL工具中,连接MySQL数据库需要进行如下配置: - 输入MySQL数据库的IP地址、端口号、用户名、密码等信息。 - 点击“Test Connection”测试连接是否成功。 - 点击“Save”保存连接配置。 3. 连接Oracle数据库ETL工具中,连接Oracle数据库需要进行如下配置: - 输入Oracle数据库的IP地址、端口号、用户名、密码等信息。 - 点击“Test Connection”测试连接是否成功。 - 点击“Save”保存连接配置。 4. 创建数据转换任务 在ETL工具中,创建数据转换任务需要进行如下步骤: - 新建一个项目。 - 在项目中创建一个任务。 - 选择数据源和目标数据库,即MySQL和Oracle数据库。 - 设计数据转换流程,包括数据清洗、转换和加载等步骤。 - 运行任务,检查转换结果是否正确。 5. 转换数据 在ETL工具中,进行MySQL与Oracle数据库转换需要进行如下步骤: - 选择要转换的数据表或数据文件。 - 对数据进行清洗和转换,如去重、格式化、合并等操作。 - 将转换后的数据加载到Oracle数据库中。 以上是使用ETL进行MySQL与Oracle数据库转换的步骤,需要根据实际情况进行具体操作。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值