java程序控制KETTLE JOB的执行

有时候我们想在java程序中触发远程服务器上kettle job的执行，并且获得执行结果。kettle的carte提供了远程执行job和transfer的功能。

我使用的kettle是6.1版本，部署在linux服务器上，没有使用资源库。

下面介绍下各个步骤：为了方便以windows系统为例

1、开启carte服务，在kettle安装目录下，运行Carte.bat,直接上图

直接打Carte.bat后面不带任何参数就可以看到参数介绍，我这里在本机8081端口开启服务，看到最后的文字说明服务启动成功。

 

2、在浏览器中查看kettle 状态

在浏览器中输入http://172.20.17.113:8081,会提示输入密码，这里先直接输入cluster/cluster,然后可以进入，页面上会显示通过carte执行的job和transfer的状态。

那么这个用户名密码在哪设置呢？我找了半天，也是网上看前辈指引，原来是在kettle安装目录/pwd下面，大家可以看到有carte-config-8081到8084这些配置文件，还有carte-config-master-8080.xml，应该是做主从集群用的，先不管了。

打开carte-config-8081.xml就可以看到

<slaveserver>
<name>slave1-8081</name>
<hostname>localhost</hostname>
<port>8081</port>
<username>cluster</username>
<password>cluster</password>
<master>N</master>
</slaveserver>

端口号跟用户名密码的默认配置都在这里了。

 

3、使用java触发JOB执行。

下面介绍真正要做的事情了，建立java project。把kettle安装目录/lib下面相关jar包依赖上去。需要的包挺多的，懒得话全部依赖吧。我这边依赖这些包就够了，因为用到了spring读取文件的工具，也依赖了spring的包。

 

代码逻辑如下：

 

package com.lzh.kettle;

import org.pentaho.di.cluster.SlaveServer;
import org.pentaho.di.core.KettleEnvironment;
import org.pentaho.di.core.Result;
import org.pentaho.di.job.Job;
import org.pentaho.di.job.JobExecutionConfiguration;
import org.pentaho.di.job.JobMeta;
import org.pentaho.di.www.SlaveServerJobStatus;
import org.springframework.core.io.FileSystemResource;

public class kettleRemoteDemo {
    public static void main(String[] args) {
        String jobPath = "E:\\ws0815\\xnol-reporting-app-trunk\\etl\\kettle\\jobs\\jb_current_account_order_latest5.kjb";
        try {
            KettleEnvironment.init();

            SlaveServer remoteSlaveServer = new SlaveServer();
            remoteSlaveServer.setHostname("172.20.17.113");// 设置远程IP
            remoteSlaveServer.setPort("8081");// 端口
            remoteSlaveServer.setUsername("cluster");
            remoteSlaveServer.setPassword("cluster");
            FileSystemResource r = new FileSystemResource(jobPath);
            // jobname 是Job脚本的路径及名称
            JobMeta jobMeta = new JobMeta(r.getInputStream(), null, null);

            JobExecutionConfiguration jobExecutionConfiguration = new JobExecutionConfiguration();
            jobExecutionConfiguration.setRemoteServer(remoteSlaveServer);// 配置远程服务

            String lastCarteObjectId = Job.sendToSlaveServer(jobMeta, jobExecutionConfiguration, null, null);
            System.out.println("lastCarteObjectId=" + lastCarteObjectId);
            SlaveServerJobStatus jobStatus = null;
            do {
                Thread.sleep(5000);
                jobStatus = remoteSlaveServer.getJobStatus(jobMeta.getName(), lastCarteObjectId, 0);
            } while (jobStatus != null && jobStatus.isRunning());
            Result oneResult = new Result();
            System.out.println(jobStatus);
            if (jobStatus.getResult() != null) {
                // 流程完成，得到结果
                oneResult = jobStatus.getResult();
                System.out.println("Result:" + oneResult);
            } else {
                System.out.println("取到空了");
            }
        } catch (Exception e1) {
            e1.printStackTrace();
        }

    }
}

　这里因为job执行需要一些时间，我代码里面每隔5秒去拿一下结果，拿到结果确定job是否执行完成。

这时候如果我们去浏览器查看，可以看到job正在执行的状态。

执行完成之后Running会变成Finish，如果有异常，status也会有提示。在命令行下面也会有job执行的日志信息。

大致过程就是这样，但是我研究的时候还是花了不少时间，网上资料不是很多，我这个算是完整介绍吧。

还有一个问题就是，我的job文件需要在本地保存一份，最开始我一直想的是我的job文件放到KETTLE所在服务器上，在代码中我指定指向job文件的路劲即可，但是运行的时候，kettle总是去本地路劲找文件然后找不到就报错。后来我想可能我的这种想法需要依赖kettle的资源库才能实现。而我没有使用资源库所以我必须在我java程序所在服务器放置job文件，然后去kettle所在远程服务器执行。

如果有朋友能解决我最后的疑虑,还望留言指点。谢谢！

 

转载于:https://www.cnblogs.com/qxundream/p/7922021.html