【ETL实战】Kettle多任务嵌套子任务和转换

文章详细阐述了一个嵌套任务的流程,从mainJob开始,涉及读取数据集合,通过循环执行子任务sonJob。转换过程中,数据通过变量传递,包括读取input数据,选择特定值,复制记录到结果,并使用getrowsfromresult获取结果记录,设置变量映射。此外,还讨论了如何保存转换记录到结果以及子任务如何读取并处理这些结果记录。
摘要由CSDN通过智能技术生成

嵌套任务排版

 先分析整个任务流程

mainJob->读取数据集合->循环执行sonJob

转换 - 变量传递方法

读取数据(input)-> 指定参数值(select values)-> 复制到结果记录(copy rows to result)

转换 - 读传递的变量方法

获取结果记录(get rows from result) -> 设置变量名映射 (set variables)

转换操作记录结果

 输入,从表中读取数据

组件在input(输入)里面

选择指定值

组件在Transform(转换)里面

复制记录到结果

组件在Job(作业)里面

打印日志

组件在Utility(应用)里面

传递结果记录数据

1,保存转换记录到结果记

从输入读取后,经过转换(业务需要)后,复制记录到结果记录(copy rows to result)

2,读取上级结果参数

从上级转换的结果记录获取数据

转换任务中读取上一步的变量

多次执行任务

 子任务读取转换结果后,执行每行

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值