利用FME调用sql语句的方法及注意事项以增量数据坐标转换部署CDC为例

利用FME调用sql语句的方法及注意事项以增量数据坐标转换部署CDC为例

    FME是一款强大的ETL工具，它具有 “集百家之所长，融百家之所思”的特点。除了不同软件平台的格式互连互转，FME还能做到功能上的一些共通共用，比如我们经常使用的数据库sql语句，FME就能很好的支持并且使用它，把它作为一个齿轮集成到我们整个ETL流程中来。

1.应用背景

    2018年应相关部门要求，全国各地转换了很多国土规划的历史存量数据到CGCS2000坐标系下，然而这种传统的存量一次性整体转换模式不能顺应我们日益增长的数据要求。因为规划设计方面还是主要使用城建坐标为主，而作为数据信息管理和审批等部门还是要求2000坐标系，因此需要我们对增量数据进行自动坐标转换和同步。

2.解决方案

       在此过程中，我们的需求主要有：多格式的支持、自动的坐标转换、增量数据的监测与记录、自动化的同步更新等，以及作为绝密的参数如何保密？

2.1实现思路

1.如何支持多种数据格式，包含矢量文件、栅格文件、空间数据库、非空间文本excel表等？

       对于多源异构数据的支持，FME是最好的解决方案，作为一个成熟的产品，支持各种我们常用的格式读写和转换。

 

2.坐标转换

       FME具有很多现成的转换器功能模块，能够完成各种坐标转换模型的参数计算和投影转换，并且能够从底层进行数据解析，可保证转换的图属无损。

3.转换参数保密

充分考虑坐标转换参数或控制点对的绝密性，支持通过外部应用程序或加密狗等安全措施存储坐标转换参数和控制点对，并控制授权许可。加密过程的架构设计如下图所示：