Kettle on MaxCompute使用指南

简介： Kettle是一款开源的ETL工具，纯java实现，可以运行于Windows, Unix, Linux上运行，提供图形化的操作界面，可以通过拖拽控件的方式，方便地定义数据传输的拓扑。Kettle支持丰富的数据输入输出源，数据库支持Oracle，MySql，DB2等，也支持业界各种开源的大数据系统，例如HDFS, HBase, Cassandra, MongoDB等。本文将介绍如何利用MaxCompute的插件无缝对接阿里云的大数据计算平台——MaxCompute。

本示例使用的工具及驱动版本
Kettle	8.2.0.0-342
MaxCompute JDBC驱动	v3.2.8

Setup

1. 下载并安装Kettle
2. 下载MaxCompute JDBC driver
3. 将MaxCompute JDBC driver置于Kettle安装目录下的lib子目录（data-integration/lib）
4. 启动spoon

Job

我们可以通过Kettle + MaxCompute JDBC driver来实现对MaxCompute中任务的组织和执行。

首先需要执行以下操作：

1. 新建Job
2. 新建Database Connection
   JDBC连接串格式为：jdbc:odps:<maxcompute_endpoint>?p