利用Kettle转储接口数据

1.     项目背景

 

1.1.  项目背景

数据接口

API：应用程序接口（Application Program Interface）的简称，是实现计算机软件之间数据通信的工具。同时API也是一种中间件，为各个平台提供数据共享。在大数据与物联网发展的背景下，目前有大量的数据接口被提供或发掘出来，提供给开发者使用，应用到生活中的每一个细节中。本文旨在阐述kettle对于数据接口的监控、调用及其转储，更多详细的数据接口内容不在此具体说明。

项目背景

本文旨在提供一种方法，以帮助同学们掌握Kettle对于数据接口的调用与转储，Kettle的配置方法和组件的使用具有多样性，需要大家多多思考与发掘。

2.     Kettle配置

本文使用的是Kettle 7.0版本，调用的接口为百度开发平台-百度地图API，返回数据集为JSON格式或者XML格式，本次使用了两种方式来存储数据，一种是导出成EXCEL，一种是导出到关系数据库进行存储。

 

2.1. Kettle转换的配置

总览

总览

 

校验接口信息

我们首先拿到WebAPI的地址，测试连接的畅通，这里我使用了百度地图的Place Suggestion API，输入城市需要检索的地点，返回建议值，效果如下：