java程序控制KETTLE JOB的执行

有时候我们想在java程序中触发远程服务器上kettle job的执行，并且获得执行结果。kettle的carte提供了远程执行job和transfer的功能。

我使用的kettle是6.1版本，部署在linux服务器上，没有使用资源库。

下面介绍下各个步骤：为了方便以windows系统为例

1、开启carte服务，在kettle安装目录下，运行Carte.bat,直接上图

java程序控制KETTLE JOB的执行

直接打Carte.bat后面不带任何参数就可以看到参数介绍，我这里在本机8081端口开启服务，看到最后的文字说明服务启动成功。

2、在浏览器中查看kettle 状态

在浏览器中输入http://172.20.17.113:8081,会提示输入密码，这里先直接输入cluster/cluster,然后可以进入，页面上会显示通过carte执行的job和transfer的状态。

java程序控制KETTLE JOB的执行

那么这个用户名密码在哪设置呢？我找了半天，也是网上看前辈指引，原来是在kettle安装目录/pwd下面，大家可以看到有carte-config-8081到8084这些配置文件，还有carte-config-master-8080.xml，应该是做主从集群用的，先不管了。

打开carte-config-8081.xml就可以看到

<slaveserver>
<name>slave1-8081</name>
<hostname>localhost</hostname>
<port>8081</port>
<username>cluster</username>
<password>cluster</password>
<master>N</master>
</slaveserver>

端口号跟用户名密码的默认配置都在这里了。

3、使用java触发JOB执行。

下面介绍真正要做的事情了，建立java project。把kettle安装目录/lib下面相关jar包依赖上去。需要的包挺多的，懒得话全部依赖吧。我这边依赖这些包就够了，因为用到了spring读取文件的工具，也依赖了spring的包。

java程序控制KETTLE JOB的执行

代码逻辑如下：

package com.lzh.kettle;

import org.pentaho.di.cluster.SlaveServer;

import org.pentaho.di.core.KettleEnvironment;

import org.pentaho.di.core.Result;

import org.pentaho.di.job.Job;

import org.pentaho.di.job.JobExecutionConfiguration;

import org.pentaho.di.job.JobMeta;

import org.pentaho.di.www.SlaveServerJobStatus;

import org.springframework.core.io.FileSystemResource;

public class kettleRemoteDemo {

public static void main(String[] args) {

String jobPath = "E:\\ws0815\\xnol-reporting-app-trunk\\etl\\kettle\\jobs\\jb_current_account_order_latest5.kjb";

try {

KettleEnvironment.init();

SlaveServer remoteSlaveServer = new SlaveServer();

remoteSlaveServer.setHostname("172.20.17.113");// 设置远程IP

remoteSlaveServer.setPort("8081");// 端口

remoteSlaveServer.setUsername("cluster");

remoteSlaveServer.setPassword("cluster");

FileSystemResource r = new FileSystemResource(jobPath);

// jobname 是Job脚本的路径及名称

JobMeta jobMeta = new JobMeta(r.getInputStream(), null, null);

JobExecutionConfiguration jobExecutionConfiguration = new JobExecutionConfiguration();

jobExecutionConfiguration.setRemoteServer(remoteSlaveServer);// 配置远程服务

String lastCarteObjectId = Job.sendToSlaveServer(jobMeta, jobExecutionConfiguration, null, null);

System.out.println("lastCarteObjectId=" + lastCarteObjectId);

SlaveServerJobStatus jobStatus = null;

do {

Thread.sleep(5000);

jobStatus = remoteSlaveServer.getJobStatus(jobMeta.getName(), lastCarteObjectId, 0);

} while (jobStatus != null && jobStatus.isRunning());

Result oneResult = new Result();

System.out.println(jobStatus);

if (jobStatus.getResult() != null) {

// 流程完成，得到结果

oneResult = jobStatus.getResult();

System.out.println("Result:" + oneResult);

} else {

System.out.println("取到空了");

}

} catch (Exception e1) {

e1.printStackTrace();

}

　这里因为job执行需要一些时间，我代码里面每隔5秒去拿一下结果，拿到结果确定job是否执行完成。

这时候如果我们去浏览器查看，可以看到job正在执行的状态。

java程序控制KETTLE JOB的执行

执行完成之后Running会变成Finish，如果有异常，status也会有提示。在命令行下面也会有job执行的日志信息。

大致过程就是这样，但是我研究的时候还是花了不少时间，网上资料不是很多，我这个算是完整介绍吧。