[Kettle] 作业（job）中两个转换（tran）传参

最新推荐文章于 2024-06-14 21:39:55 发布
最新推荐文章于 2024-06-14 21:39:55 发布
阅读量4.1k 收藏 10
点赞数 2
分类专栏： Data Base
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42385705/article/details/107322349
版权
在Kettle开发中，当需要将第一个转换的结果作为参数传递给第二个转换时，可以采用设置变量和获取变量组件来实现。本文介绍了两种方法：在每个功能转换中都加入获取令牌的步骤，或者将获取令牌和具体功能分为两个独立的转换在作业中串联。通过设置变量组件保存第一个转换的输出，然后在第二个转换中使用获取变量组件读取该参数，实现转换间的参数传递。
摘要由CSDN通过智能技术生成

在使用Kettle开发时 ，有些在一个作业当中， 第二个转换需要用到第一个转换执行之后的结果作为参数传给第二个转换继续执行就要用到传参的组件

作业（job）中两个转换（tran）传参

场景：
首先根据apiId和secret两个参数去请求一个url得到一个token，这个token是有时间限制的相当于令牌。拿到这个令牌，再去将这个token作为参数请另一个url得到具体的数据

我首先想到的两种方法
方法一
在每个功能转换中，都加入获取token步骤
在这里插入图片描述
方法二
将获取token作为单独的一个转换。把具体功能作为一个转换，在一个作业中，转换一为获取token，转换二为解析获取数据

下图 获取token的转换
在这里插入图片描述
下图 获取数据的转换
在这里插入图片描述

下图合并两个转换的job

最低0.47元/天 解锁文章
kettle—参数传递
03-22 4万+
下面我们总结了一下位置参数、命名参数、变量的优缺点，然后文章中介绍了变量的使用的两种方式通过设置变量组件设置然后获取使用通过转换获取设置变量然后获取使用位置参数（argument）命名参数（parameter）变量（variable）说明根据参数的位置来设置和读取参数值，用于在KJB外部传入，并在KJB内部使用根据参数的名字来设置和读取参数值，用于在KJB外部传入，并在KJB内部使用由用户自定义，在KJB内部随时随地的定义、赋值和使用关键点。
Kettle>作业和参数
qq_44509920的博客
05-03 1280
文章目录Job（作业）Job Item（作业项）Job Hop（作业跳）参数参数的使用表输入参数传递 - 转换命名参数 Job（作业） 大多数ETL项目都需要完成各种各样的操作，例如： 如何传送文件 验证数据库表是否存在，等等 而这些操作都是按照一定顺序完成，Kettle中的作业可以串行执行转换来处理这些操作。 Job Item（作业项） 作业项是作业的基本构成部分。如同转换的组件，作业项也可...
Kettle循环获取结果集中的数据并传入转换里面
stormkai的专栏
03-26 5286
1. Kettle循环获取结果集并传入转换里面 是Kettle循环转换（t1.ktr）中的结果集，放到转换2（var.ktr）中，输出到本地txt文件中 1.1 job j1.kjb JavaScript var prevRow=previous_result.getRows();//获取上一个传递的结果 if (prevRow == null &&(prevRow.si...
java调用kettle向job（任务）和transformation（转换）传递参数实例
热门推荐
简单而有效
12-19 5万+
详细介绍了java传递的参数，kettle中如何使用。 java调用kettle向job（任务）和transformation（转换）传递参数实例
Kettle 传参(参数)的使用
最新发布
weixin_68547003的博客
06-14 2036
Kettle 传参(参数)的使用
kettle 转换命名参数从将上一转换的参数传递到下一转换中
ispringmw的博客
09-18 6456
kettle 转换命名参数从将上一转换的参数传递到下一转换中 1.知识点 1）如何将转换中的行记录传递到job（结果）中。 2）如何使用转换的命名参数功能获取到上一转换中的参数。 2.需求及实现 1）需求： ​ 如下图所示在转换1中将转换中的结果值传递到作业中，通过转换2的转换命名参数设置接收来自job中的值并将其设置为参数传递到转换2的内部。 2）实现： 实现将转换1中的结果值从转换传递到job中。 从表输入中获取值，通过组件复制记录到结果将表输出查询到的结果发送到job作业流中。 通过转换
Java程序调用kettle中的job及trans
shendeguang的专栏
12-05 3447
package org.gdh.kettle.transform; import org.pentaho.di.core.KettleEnvironment; import org.pentaho.di.core.exception.KettleException; import org.pentaho.di.core.exception.KettleXMLException; i
java调用kettle中的job与转换-源码
11-16
在"Java2Kettle"这个示例中，可能包含了一个完整的Java应用示例，展示了如何从Java代码中调用Kettle的Job和转换，以及如何传递参数和处理结果。如果你遇到任何问题，可以参考这个示例，或者查看Kettle官方文档和社区...
利用kettle运行job，完成以上的两个过程.mp4
02-04
利用kettle运行job，完成以上的两个过程.mp4Kettle研究-1-ETL认识与Kettle研读 ETL工具Kettle研究-2-Kettle安装部署 ETL工具Kettle研究-3-MySQL数据导入HIVE ETL工具Kettle研究-4-同步和更新备份表
java 调用kettle job 传参_java调用kettle向job（任务）和transformation（转换）传递参数实例...
weixin_32350885的博客
02-25 728
最近要对一个系统的数据同步到另一个系统中，要求新系统的数据结果完成之后，实时同步到另一个系统数据表中。也就是动态的传一个关联的ID。由于旧系统是vb做的，无法提供webservice接口，并且同步的表涉及到十几张表，并且两个系统表结构完全不一样，所以想到了kettle。java集成kettle网上有现成的实例，很简单。如：http://bakcom.iteye.com/blog/1399587虽然...
Kettle循环遍历结果集作为参数传入转换
11-19
Kettle8.2做的，Kettle循环获取转换中的结果集传递到下一个转换中，并最终输出到txt文档
Kettle循环遍历结果集作为参数传入转换.zip
03-26
Kettle8.2做的，Kettle循环获取转换中的结果集传递到下一个转换中，并最终输出到txt文档
kettle实现多参数传递并且循环加载数据.zip
08-31
kettle定时加载数据，并且实现多参数传递，高效处理复杂业务逻辑
kettle作业及转换脚本.zip
09-11
在本压缩包“kettle作业及转换脚本.zip”中，包含的是kjb作业文件和ktr转换文件，这些都是Kettle操作的核心元素。 1. **Kettle作业（Job）**： Kettle作业是Kettle工作流的高层次视图，它由一系列的步骤组成，这些...
kettle 实现一个作业并行执行多个转换
Dxy的博客
06-17 1万+
前面已经讲过定时同步，就不说了，直接说并行执行。 1.创建一个作业，建立好需要的多个转换 2.如图所示：将start-转换-成功 连接在一起 3.右击start,点击RUN NEXT。。。OK这样就能并行执行了！ ...
KETTLE 批量处理，转换命名参数将上一转换的结果传递到下一转换中
亮大大的博客
10-17 2133
KETTLE 批量处理，转换命名参数将上一转换的结果传递到下一转换中
kettle 新建作业执行多个转换job按并行和顺序执行
weixin_42750954的博客
11-24 8880
因为数据库有接近300个表，为了防止意外情况，某个表同步失败，不影响其他大量表同步，所以考虑了拆分，将6-10个表作为一个脚本，就算一个脚本中的某一个表有问题，也只是影响本脚本中的10个表（一个脚本中一个表失败会中断本脚本的继续执行；当然你可以跳过错误，但是这样数据就不准确了 ）；所以转换脚本有30个脚本；但为了执行的时候不出错遗漏执行，我们新建一个作业，一键化执行所有脚本 1，顺序执行：意思就是一个个脚本执行，前面一个脚本执行成功了，才会执行下一个脚...
kettle表输入传动态参数，将表输入转换放到job中，命令传参
Mr.Zheng的博客
11-23 1万+
前言 写一个转换，转换中有获取系统变量和设置变量，还有表输入等其他信息。 将转换放到一个job中，利用./kitchen.sh 来传递参数。 这里需要设置作业里的参数和转换里的参数，为了描述下面一些特殊操作，所以特此记录！ 1.点击titile 例如在job作业中，点击star组件，会弹出一个提示框 红色框部分即为titile，双击以后就会看到设置job的页面，转换同理！ 2.设置作业参数 点击命名参数，然后在里面编辑你传递的参数名！ 创建一个转换 1.获取系统信息变量 因为表输入里动态参数为proct 2
kettle 参数传递,kettle中作业转换执行含有参数传递
weixin_26879037的博客
03-23 3436
kettle中作业转换执行含有参数传递kettle中作业转换执行含有参数传递(1)新建一个作业(新建->作业)，并在控制面板右键：(2)设置一个命令参数：(3)把作业的参数传递给转换：(4)在转换中右键设置转换属性：(5)接收作业中设置的传递参数：(6)参数的获取：(7)用命令行执行此.kjb文件：进入到kitchen目录下执行的命令：数据库设计：一：二：附加(附加部分转发自：http:/...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值