ETL工具

Pentaho Data Integration（简称PDI），原名Kettle。它是一个ETL工具（Extract-Transform-Load的缩写，即数据抽取、转换、装载的过程）

1、下载地址
https://sourceforge.net/projects/pentaho/files/
下载client-tools下的，pdi-ce-xxxx.zip

2、启动
解压开后，windows下运行Spoon.bat

3、安装驱动包
数据库用的是oracle，下载ojdbc的jar包，复制到\data-integration\lib文件夹下面，重新启动PDI
根据jdk版本下载，如果是用jdk1.8， 一定要下载用jdk1.8编译的，比如：ojdbc8-19.9.0.0.jar

4、建立数据库连接
选择New file --> transformation，新建一个转换
选择Database connections建立数据库连接

注意Database Name填写数据库的SID
点击下方的Test：

5、抽取数据
选择Design --> Input --> Table input

将图标拖到右边，双击编辑

点击Preview测试，数据已抽取到

6、将记录转换成json格式并写入文件
选择Design --> Output --> JSON output

将图片拖到右边，双击编辑

选择输入来自于前一个模块

7、点击上面的Run，文件生成成功

8、保存的转换文件test1.ktr，是一个xml格式
包括数据库连接，用到的表名、字段名、保存目录都写在里面