2021-10-09

**

第四章 CSV文件、JSON文件数据的抽取

**一、CSV文件的抽取

1.创建转换csv_extract；
打开Kettle，依次点击 文件 -> 新建 -> 转换，创建新转换（保存可修改转换名）。点击核心对象，展开输入步骤，选中CSV文件输入控件，拖入Kettle工作区；展开输出步骤，选中表输出控件，拖入Kettle工作区，并用Hop跳线连接。

2.配置“CSV文件输入”控件；

预览数据

3.配置MySQL数据库连接；
单击“新建”，配置数据库连接连接，此处的数据库名为extract，需要提前在SQLyog建立（两处用户名与密码相同）。配置内容如下：

点击“测试”观察是否成功连接上数据库：

4.配置“表输出”控件；

点击目标表旁边的浏览，选择csv表。

单击“确定”，返回上一界面，将“指定数据库”打钩，选择“数据库字段”，可直接点击“获取字段”，也可选择“输入字段映射”，弹出“映射匹配”对话框，依次选中“源字段”和“目标字段”中的字段，点击“Add"即可，效果如下：

5.运行转换并查看数据表csv中的数据。

已成功抽取CSV文件csv_extract.csv中的数据保存至数据库extract中的数据表csv中。

二、JSON文件的抽取

1.创建转换json_extract；

2.配置“JSON input”控件；

点击“增加”，将所选择的文件添加到“选中的文件”处，点击“字段”，进入其界面，添加要抽取的数据字段，最后点击确定完成JSON Input控件的配置：

配置JSON Input2控件。双击进入其界面，勾选“源定义在一个字段里？”复选框；在“从字段获取源”后的下拉列表中 选择字段名，即data：

进入“字段”，操作同上，从data中抽取field和value字段，点击确定。

3.配置MySQL数据库连接；（同上）

4.配置“表输出”控件；

5.运行转换并查看数据表json中的数据。