【4】Kettle中嵌入Sql脚本、Java、JS

最新推荐文章于 2024-07-29 14:11:38 发布
最新推荐文章于 2024-07-29 14:11:38 发布
阅读量1.3k 收藏 1
点赞数 1
分类专栏： Kettle入门与实战
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u014307117/article/details/79351883
版权

Sql脚本

一些复杂的逻辑，难以用Kettle自带组件完成，可以使用sql语句完成，借助Kettle的【执行Sql脚本】组件


Java以及JS


1.可以将java代码直接打成Jar包，放入Kettle的 lib目录


2.然后使用Js调用Jar包，得到结果。


3. 也可以使用Kettle 自带的Java组件，但是会不太灵活




JNSimba
关注
专栏目录
Kettle（11）：SQL脚本组件
u013938578的博客
01-27 2407
执行SQL脚本组件，可以让Kettle执行一段SQL脚本。我们可以利用它来自动执行某些操作。
数据清洗工具kettle
热门推荐
shenchuanlen的博客
05-26 1万+
kettle简介：          kettle是pentho的一个组件，用来做数据清洗的，现在已经支持很多数据库以及文件格式，也包括大数据hdfs等。有图形界面，也可以在linux下去调用，用起来非常方便。kettle是开源工具，有源代码可以下载，ant管理编译，流程比较清楚，如果满足不了自己的需求可以去开发，也可以嵌入使用java代码以及javascript代码，来进行数据清洗。下面我来简
kettle转换JavaScript加载外部js文件
weixin_34348174的博客
05-25 438
  日常开发中，时常会出现这样一种情况。有大量的函数是通用的。而每个JavaScript里面写一遍，给维护带来很大的困扰。因而需要将公共的函数写在外部js文件中。这时就需要引入外部的公共文件了。下面是在转换里的JavaScript组件中引入外部公共js文件。 //加载js文件 LoadScriptFile(getVariable("Internal.Transformation.File...
kettle使用java代码保存到数据库
最新发布
qq_21298819的博客
07-29 206
不了解kettle中java代码的，可以自行去学习一下，这里processRow()相当于main函数。
Kettle:执行SQL脚本
读万卷书 行万里路
11-17 1万+
【执行SQL脚本】可以允许以以下两种方式来使用： 在转换的开始阶段，执行一次SQL脚本 对传入该步骤的每一行数据执行一次SQL脚本 假设数据库表full_sou在rce和full_target中的数据如图1: 图1 创建只有一个【执行SQL脚本】操作的转化，其配置如图2。运行该转换可以将这两个表一起清空(图3)。 图2 图3 除了上述这种方法之外，也可以使用转换(图4)，其中【自定义常量】和【执行SQL脚本】的配置图5和图6： 图4 图5 图6 另外在【执行SQL脚本...
kettle执行SQL脚本
s1162276945的博客
06-09 8914
kettle设置参数
执行sql脚本——kettle开发03
java程序员的蜕变之路
05-24 1021
1、一个作业内的转换，是顺序执行的。2、一个转换内的步骤是并行执行的。3、作业内不支持事务，转换内支持事务。1、执行SQL脚本是优先于所有步骤。2、使用“阻塞数据直到步骤都完成”，确保其他数据步骤都完成再进行下一步骤。如果我们不想让执行SQ脚本先执行，有没有办法让他听话呢？答案是一定的，此时我们需要用到阻塞对象，在执行SQ脚本前面安一个智能保安，保安保证前面的对象都执行完以后，再允许执行SQ脚本来运行。
《kettle中使用javascript步骤和fireToDB函数实现自定义数据库查询 》代码
10-29
在Kettle（Pentaho Data Integration，也称为ETL工具）中，JavaScript步骤是一个非常强大的功能，它允许用户通过编写JavaScript代码来实现自定义的数据处理逻辑。本篇将深入探讨如何利用JavaScript步骤和`fireToDB`...
kettle分批处理大表数据_数据层交换和高性能并发处理(开源ETL大数据治理工具--KETTLE使用及二次开发 )...
weixin_42316909的博客
12-30 897
ETL是什么？为什么要使用ETL？KETTLE是什么？为什么要学KETTLE？ETL是数据的抽取清洗转换加载的过程，是数据进入数据仓库进行大数据分析的载入过程，目前流行的数据进入仓库的过程有两种形式，一种是进入数据库后再进行清洗和转换，另外一条路线是首先进行清洗转换再进入数据库，我们的ETL属于后者。大数据的利器大家可能普遍说是hadoop，但是大家要知道如果我们不做预先的清洗和转换处理，我们进入...
【Kettle 入门 Windows10 CentOS7】Kettle-8.2.0 入门基础 2019.10.31
在微风中飘落的博客
10-31 1579
Pentaho·Data Integration - Kettle； 简介，软件背景，特点，相关资源，Kettle构架，客户端，服务器； 核心概念：Transformation，Job变量； Kitchen命令行选项； WindowsLinux集群部署； 实际案例；
kettel循环执行动态sql
03-01
kettel循环执行动态sql，
《kettle中实现动态SQL查询》博客文章示例代码
09-15
通过示例学习kettle动态查询，可以使用问号占位符或命名参数，并详细说明两者的区别。
【二】使用kettle的执行sql脚本入门小demo
qq_41444892的博客
11-04 3618
使用表输入，执行sql脚本的入门小demo 如果对于基本操作不太了解的可以去看我的第一篇推文 【一】kettle使用表输入，表输出控件入门小demo 在使用表输入的过程中发现，在某些情况下使用并达不到想要的效果， 【需求】比如我在表输入中查询到了三个字段，我想将其中一个字段内容存入表输出中，除此之外，还想顺便存入其他已定义好的数据。 这时就可以用到脚本中的执行sql脚本 具体的步骤与demo1一样...
kettle从入门到精通 第六十四课 ETL之kettle kettle中执行SQL脚本步骤，使用需当心
zhangjin1222的博客
06-03 1214
上图可以清晰的看到写日志two可执行了两次，那是因为执行SQL脚本也执行了两次，同时前置步骤的中的name字段也可以正常打印了。看过源码的应该了解执行SQL脚本步骤肯定是根据是否执行每一行参数来决定是在init还是在processRow方法中执行。根据上图日志可以清楚的看到写日志two步骤只执行了一次，因为它的前置步骤执行SQL脚本也只执行了一次。3、执行SQL脚本中的执行每一行不进行勾选，表示此步骤只在初始化阶段执行一次。4、执行SQL脚本中的执行每一行勾选，表示对步骤接收的每一行输入执行一次。
Kettle之【执行SQL脚本】控件用法
chenyiming2010的博客
09-14 1万+
版本：kettle6.1 控件：执行SQL脚本   该控件可以执行一个update语句，用来更新某个表中的数据， 如果不带条件，就很简单，把SQL语句粘贴到控件中，设置好数据库连接即可 如果需要带条件执行，则需要进行一些设置。入下图，是一种常用的设置方法 需要设置的地方有： 1、勾选“变量替换” 2、勾选“执行每一行?” 3、勾选“Bind parmaters?” 4、在whe...
kettle spoon使用变量与使用sql脚本运行组件
你渴望力量吗？
12-12 2953
kettle,spoon,sql运行，步骤顺序错误，变量
kettele性能优化，执行SQL脚本性能剖析
qq_29061315的博客
01-25 2178
不要再一个表输入或者表输出或者更新插入作业过程后增加UPDATE的SQL脚本。会导致任务特别慢。 如果需要执行，单独作为转换执行即可
kettle 脚本 java_Kettle 执行SQL脚本
weixin_42309293的博客
02-12 1085
以下操作都在5.0.1版本下进行开发，其余版本可以进行自动比对本文将对Kettle5中常用步骤字段选择(又名选择/改名值，英文原名：Select Values)进行详细解释。这个步骤的功能非常强大，主要包括：选择：选择的字段将按照你指定的顺序加入到输出流中，其他字段一概丢弃。除非你选中包含未选择的列(图1中的第2个控件)；删除：需要从输入流中丢弃的字段；元数据：需要改变的元数据，包括字段的名称、类...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值