在kettle中使用java直接调用transformation、job文件执行

目前在做一个项目,需要用到数据清洗,因为kettle是开源的,所以就选择了它。目前遇到的困难是,在创建好转换(transformation)或任务(job)后,需要集成到java代码中,以便和其他功能结合。由于网上很多例子的kettle版本是4.x以及5.0左右的,而kettle 6.0版本较之前有了很大改动,这些java代码已经不适合用于kettle 8.0了。经过在网上查资料以及在论坛里查找资料和提问之后,终于解决了如何让java通过kettle 8.0版本调用转换和job。

1,需要哪些jar包


kettle开头的包都需要,也许这个项目有些包不用,但最好加进去。另外guava、metastore和mysql-connector包也是必须的,不然程序会报错。其他包自己看着加入吧

2,在spoon上创建转换或job
在这里就不叙述了,我有时间会在另一篇博客中记录如何使用spoon上的控件创建转换和job。有需要可以看看。


3,java代码示例

 
import org.pentaho.di.core.KettleEnvironment;
import org.pentaho.di.core.exception.KettleException;
import org.pentaho.di.trans.Trans;
import org.pentaho.di.trans.TransMeta;
 
public class ExistTrans {
 
    public static void runTransformation() {
        try {
            String filename = "C:\\Users\\Francis\\Desktop\\table.ktr";
            // StepLoader.init();
            // EnvUtil.environmentInit();
            KettleEnvironment.init();
            TransMeta transMeta = new TransMeta(filename);
            Trans trans = new Trans(transMeta);
 
            trans.execute(null); // You can pass arguments instead of null.
            trans.waitUntilFinished();
            if (trans.getErrors() > 0) {
                throw new RuntimeException(
                        "There were errors during transformation execution.");
            }
        } catch (KettleException e) {
            // TODO Put your exception-handling code here.
            System.out.println(e);
        }
    }
 
    public static void main(String[] args) {
 
        runTransformation();
    }
}

 

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值