kettle-在java项目中远程kettle集群执行ktr文件

最新推荐文章于 2024-05-28 15:49:51 发布
最新推荐文章于 2024-05-28 15:49:51 发布
阅读量5.6k 收藏 7
点赞数
分类专栏： kettle 文章标签： kettle java kettle 集群
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_37618809/article/details/81503338
版权

1.新建java项目，jdk设置为1.8（本人使用的kettle版本为7.1）。

2.添加所需的jar，如下图，并build path,，jar包的来源是kettle安装包lib下。

3.新建执行类KettleUtil.java

package com.kettle;

import org.pentaho.di.core.KettleEnvironment;
import org.pentaho
最低0.47元/天 解锁文章
lisery_nj
关注
  • 0
    点赞
  • 踩
  • 7
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
专栏目录
Kettle【实践 04】Java环境实现KJB和KTR脚本文件执行v9版本9.0.0.0-423相关依赖说明（云资源分享:依赖包+kjb+ktr+测试源码）
シ風
03-02 2361
Java环境实现KJB和KTR脚本文件执行v9版本9.0.0.0-423相关依赖说明（云资源分享:依赖包+kjb+ktr+测试源码）
Kettle_中的集群
01-14
Kettle 集群 文　档　详细介绍哦　　　　　　　　ｓｄｆｄｓｆ　
Kettle-API FOR java
03-16
英文版的API说明
kettle组件之java代码，快速上手必看
最新发布
信徒博客
05-28 601
难点：1、我不想要把处理后的值覆盖掉原来的值，而是创建一个新的字段，给这个新的字段赋值。3、get(Fields.in,"字段名").getString(r);功能、获取记事本里面的数据，把这个数据进行简单的处理，然后输出;获取这一行数据中，对应的字段名并且是值是字符串类型的数据。2、其次我不想要之前的字段，很冗余。我们先了解不同于java代码的kettle的一些方法。2、get(Fields.in,"字段名");6、logBasic("数据是: " +b);获取具体的某个字段的名称。
kettle-core-8.1.0.0-365_kettle_kettle达梦8_
10-03
适配了达梦数据库的kettle核心代码。
kettle调试远程执行的作业
热门推荐
1032851561的博客
10-28 1万+
背景在使用ftp下载插件时，发现进行本地执行时可以正常，但当选择了远程执行并指定了远程服务器后发现出现了错误：从 FTP:User cannot log in. 获取文件时发生错误。根据错误信息可以判断是因为ftp登录不上的原因，至于具体的原因无法定位，为了一探究竟，于是便萌生了调试远程作业的想法，顺便深入了解一下了解kettle运行原理以及源码学习。思路carte服务器实际上就是一个web ser......
【转】Kettle集群
weixin_30456039的博客
05-26 70
本文转自：http://blog.csdn.net/dqswuyundong/article/details/5952009 Kettle集群 Kettle是一款开源的ETL工具，以其高效和可扩展性而闻名于业内。其高效的一个重要原因就是其多线程和集群功能。 Kettle的多线程采用的是一种流水线并发的机制，我们在另外的文章中专门有介绍。这里主要介绍的是kettle的集群。 ...
kettle使用命令行来运行ktr和kjb
05-13
kettle使用命令行来运行ktr和kjb
kettle执行job流程分析（2）
u013257767的博客
03-17 774
真是时光荏苒啊好长时间没再写kettle的代码分析了，正好最近在排查kettle的连接池泄露的问题，趁此机会再来好好聊一聊。job里有个比较灵活的用法，就是前后监听器 JobListener。遍查 engine的代码，以结束监听较多。如果查看 trans 和 job 的执行，就会发现这两者的执行是有较大差别的。
ETL工具 - JAVA 调用 Kettle 转换、作业脚本
小毕超博客
05-03 3949
JAVA 调用 Kettle 转换、作业脚本。
KETTLE工具的相关jar包 下载直接使用即可
12-11
在实际应用中，可能还需要配置Kettle的配置文件，如`kettle.properties`，`log4j.properties`等，来定制Kettle的行为和日志输出。同时，数据源的配置文件，如数据库连接字符串，也需要正确设定。 总的来说，Kettle...
java远程调用kettle说明与代码
09-27
java远程调用kettle说明与代码
kettle下载文件.zip
08-13
在压缩包中的"Kettle下载文件"，可能是包含了若干个.ktr（Transformation）和.kjb（Job）文件，这些都是Kettle的工作流和转换实例。这些文件通常包含以下部分： - **输入步骤**：从数据源获取数据，如从数据库查询...
ETL工具pdi-7.1.0.0-12（Kettle）.zip
05-28
3. **部署与执行**：将设计好的转换或作业保存为.ktr或.kjb文件，然后使用Kitchen或Pan进行命令行执行。 4. **监控与管理**：通过Carte服务器，可以远程监控作业状态，获取执行日志，实现ETL的集中管理。 **四、PDI...
kettle工具——用于数据迁移等
07-05
4. **分布式执行**：Kettle的Job和Transformation可以在本地、远程服务器或者分布式集群（如Hadoop）上执行，支持并行和分布式处理，提高了数据处理的效率。 5. **版本控制**：Kettle支持与Git等版本控制系统集成，...
mysql-to-hive.ktr
02-04
从数据库(mysql)中读取数据写入HDFS并建hive表；在该转换中，需要配置2个DB链接（Mysql和HiveServer2），配置Hadoop集群（HDFS），配置子服务器（远程执行服务器）。需要实践的元数据文件：mysql-to-hive.ktr
ETL工具kettle的列转行组件
像豆芽一样优秀
09-25 5588
一、 示例脚本： # 创建表 create table score( id bigint(20) auto_increment, sname varchar(255) comment "学生姓名", cname varchar(255) comment "课程名称", score int(11) comment "分数", primary key(id) )engine=innodb; # 插入数据 insert into score values(1,"小孙","mysql",55); ins
java以api的方式集成调用kettle
qq_32577829的博客
03-31 8433
一、kettle集成调用的多种方式。 kettle提供了多种方式集成调用，比如： 1、脚本的方式，windows下以bat脚本调用，Linux下以sh脚本调用。 2、http请求carte服务的方式进行集成调用。java端可以采用httpclient api去调用carte。 3、以java工程引入kettle依赖，采用api集成的方式调用。 二、为什么要以api的方式集成kettle 因为第一点提到的1、2两点，都需要在服务节点端安装kettle，且脚本的方式调用要维护多套系统执行脚本。而以c
集群服务器通讯 java_java远程调用kettle集群服务器说明与代码
weixin_39639686的博客
02-16 417
Kettle远程任务执行远程服务器说明KETTLE 提供了名为carte的web server 程序，也叫slave server ,启动该程序可以把主机作为kettle的运行服务器，可以接收其他kettle客户端发送过来的ETL任务。此功能为ETL任务分布式执行提供了方便。可以在多个服务器上运行carte web server,在调用不同的ETL任务时，指定不同的目标服务器执行。启动方法kett...
java远程调用kettle
09-14
要实现Java远程调用Kettle，可以按照以下步骤进行操作： 1. 首先，确保已经将Kettle所需的jar文件添加到项目的构建路径中。 2. 创建一个Java程序，并导入Kettle相关的类库。可以使用Kettle提供的`Kitchen`类来执行Kettle作业或转换。 3. 在Java程序中，通过创建一个`KettleEnvironment`对象来初始化Kettle环境。这将加载所需的配置文件和类库。 4. 创建一个`TransMeta`对象或`JobMeta`对象来加载Kettle转换或作业的定义。可以使用`TransMeta`类来加载和执行Kettle转换，使用`JobMeta`类来加载和执行Kettle作业。 5. 使用`KettleEnvironment.init()`方法来初始化Kettle环境。 6. 创建一个`Trans`对象或`Job`对象，使用前面创建的`TransMeta`对象或`JobMeta`对象作为参数。 7. 调用`Trans`对象或`Job`对象的`execute()`方法来执行Kettle转换或作业。 8. 检查执行结果，可以通过检查日志或获取作业的状态来确定执行是否成功。 下面是一个示例代码，展示了如何通过Java远程调用Kettle转换： ```java import org.pentaho.di.core.KettleEnvironment; import org.pentaho.di.trans.Trans; import org.pentaho.di.trans.TransMeta; public class KettleRemoteCallExample { public static void main(String[] args) { try { // 初始化Kettle环境 KettleEnvironment.init(); // 加载Kettle转换定义 String transPath = "path/to/your/transform.ktr"; TransMeta transMeta = new TransMeta(transPath); // 创建Kettle转换 Trans trans = new Trans(transMeta); // 执行Kettle转换 trans.execute(null); trans.waitUntilFinished(); // 检查执行结果 if (trans.getErrors() == 0) { System.out.println("Kettle转换执行成功！"); } else { System.out.println("Kettle转换执行失败！"); } } catch (Exception e) { e.printStackTrace(); } } } ``` 请注意，上述示例代码中的`path/to/your/transform.ktr`应替换为实际的Kettle转换文件路径。根据需要，您可以更改代码以适应作业的调用。 通过以上步骤，您可以在Java程序中远程调用Kettle转换或作业。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值