转换与作业

一、Kettle的基本概念

  一个数据抽取过程主要包括创建一个作业，并且每个作业可以包括多个转换操作。此数据抽取过程可通过Kettle工具完成，也可以通过编写程序调用的方式实现。Kettle工具的执行分为两个层次，即转换和作业，这两个层次最主要的区别在于数据传递和执行方式。

1.1转换

  转换是ETL解决方案中重要的组成部分之一，主要用于数据的抽取、转换以及加载等操作，其本质是一组图形化的数据转换配置的逻辑结构。一个转换包括一个或多个步骤，如读取文件、过滤输出行、数据清洗或将数据加载到数据库中等步骤。转换中的步骤是通过跳来连接的，跳定义了一个单向通道，允许数据从一个步骤向另一个步骤流动。在Kettle中，数据的单位是行，数据流就是数据行从一个步骤到另一个步骤的移动。

  下面通过一个简单的例子讲解Kettle中的转换。

1.1.1 创建转换

  双击Kettle目录下的Spoon.bat脚本，启动Kettle工具，在工具栏处选择“文件”→“新建”→“转换”命令，创建一个转换，名称默认是“转换1”。