kettle多数据源多表关联同步到单表

kettle多数据源多表关联同步到单表


概述:在kettle中下图设计转换流程

在这里插入图片描述
说明:先在准备两个数据库,可以是不同数据库类型的数据库,下面采用mysql数据库为例,创建test_input数据库和test_output数据库。
在这里插入图片描述
分别在test_input数据库创建教师表teacher和教师课程关系表teacher_course。在test_output数据库创建课程表course。
在教师表创建测试数据,测试数据如下图:
在这里插入图片描述
在教师课程关系表创建测试数据,测试数据如下图:
在这里插入图片描述
在课程表创建测试数据,测试数据如下图:
在这里插入图片描述
测试sql关联的效果:
在这里插入图片描述
现在使用kettle进行数据同步达到sql关联的效果
1.拉出表输入进行教师表输入:
在这里插入图片描述
(这里需要你创建下数据库连接test_input和test_output来对应2个数据库)即下图:
在这里插入图片描述
在这里插入图片描述
若你不知道怎么创建数据库连接的话可以点击新建:
在这里插入图片描述
或在主对象树的DB连接右键新建。
哈哈扯远了。现在我们回到教师表的表输入操作上来。
先填写步骤名称再选择数据库连接然后点击获取sql查询语句:
在这里插入图片描述
选择对应的表:
在这里插入图片描述

教师课程关系表和课程表的表输入按照教师表的表输入操作进行^ _ ^
拉入记录集关联前需要先拉入排序记录(同一个记录集关联的输入源的排序字段一般以关联字段的相同排序方式进行^ _ ^),以教师表的职工号排序为例:
在这里插入图片描述
其他排序也按照这个标准进行哈^ _ ^
进行记录集关联:以教师表和教师课程关系表关联为例:
在这里插入图片描述
记录集关联后我们需要对字段进行选择以获取我们需要对字段:
在这里插入图片描述
和对名称一样对字段进行重新命名:
在这里插入图片描述
最后同步到我们的目标表集表输出:
在这里插入图片描述
最后最后我们可以点击运行看看效果:
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
哈哈大功告成^ _ ^

  • 3
    点赞
  • 18
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
要实现kettle多表同步Oracle数据,可以使用Kettle工具中的相关组件和功能来完成。下面是一个简单的步骤: 1. 数据源配置:首先,在kettle中配置连接到Oracle数据库的数据源。通过在"数据库连接"组件中输入相关的连接信息,如主机名、端口号、用户名和密码等来建立与Oracle数据库的连接。 2. 数据抽取:在Kettle中使用"Table input"组件来抽取源表中的数据。在该组件中,选择连接到Oracle数据库的数据源,并指定要抽取的表名或查询语句。可以使用该组件的参数设置功能来进一步定义抽取数据的条件。 3. 数据转换:使用"Select values"、"Add constants"、"Replace in string"等组件来进行数据转换和处理。例如,可以将日期格式进行转换、对某些字段进行计算、添加常量字段等。这些转换步骤可以根据需要进行设置和调整。 4. 数据加载:在Kettle中使用"Table output"组件来将转换后的数据加载到目标表中。在该组件中,选择连接到Oracle数据库的目标表以及相关的字段映射。可以使用该组件的插入方式设置来选择插入新数据或更新已有数据。 5. 任务调度:在Kettle中创建一个任务调度,定义数据同步的周期和执行方式。可以设置定时触发,也可以通过外部事件触发,保证数据同步的持续性和准确性。 通过以上步骤的设置和配置,可以实现Kettle多表同步Oracle数据的功能。根据具体需求,还可以进行更复杂的数据转换和处理,来满足数据同步的要求。
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值