ELT工具kettle的基本使用

Kettle简介
​ kettle是一款开源的ETL工具，存java编写，可以在wind，linux，unix上运行，绿色无需安装，数据抽取高效稳定。kettle允许开发人员管理来自不同数据库的数据，通过提供一个图形化的用户环境来描述你想干什么，而不是你想怎么做。

而ETL即数据抽取E，转换T，装载L，对于企业或行业应用来说，我们经常会遇见各种数据的处理，转换，迁移，所以对于数据开发人员来说，了解并掌握一种ETL工具的使用是必不可少的。

kettle工具的基本操作

kettle的功能有转换和作业，这里着重讲解一下转换的使用方法

1.新建转换

右边则是一些转换的的step步骤

2. 输入
   

这里我们选择数据库表输入，双击或拖动放入转换列表（也可以选择其他方式输入）

在此之前先进行DB连接

双击右侧表输入，进行配置，选择数据源，并输入SQL。可以点击预览进行预览数据

3. 转换，对数据进行操作处理

这里可以选择工具自带的转换方法

也可以选择输入一些转换脚本，我这里选择使用java脚本,使用shift键将他们连接起来

随后在main方法里进行java代码编写，注意使用工具的字段设置方法

使用

String foobar = get(Fields.In, “a_fieldname”).getString®; 获取字段

get(Fields.Out, “output_fieldname”).setValue(r, foobar); 输出字段

4. 输出
   随后选择将处理后的数据输出，这里可选择的excel输出、表输出，我这里选择对现有表进行更改，再次使用shift键将step连接起来

对输出进行配置

5. 进行运行就可以执行这次转换

运行结束后，我们可以在下方看到运行结果，其中有日志，数据浏览等，我们可以看到一共读取了多少条数据，插入更新了多少数据

这样就完成了一次转换