FME读写模块优化

原文发布时间：2015-01-28 09:34:07

作者：一峰

如何评估读模块性能

要想提高读模块的性能必须了解转换开始时它是怎么工作的，但是这有很难与转换器分开。我们知道读取数据所花的时间，关键信息来源于日志的Emptying Factory Pipeline消息，但是，往往我们等待的时间比日志显示的时间会更长，因为FME要等待数据库或者文件系统的反应。例如，日志显示数据读取了1.6秒，但是实际我们等待的时间更长。

 

又例如上面面工作空间，日志文件显示，读取数据消耗了27.5秒。

但是整个转换过程消耗了27.6秒

 这似乎不大可能，怎么数据读取用了27.5秒，而处理过程只用了0.1秒？

实际上FME读取数据和处理数据是同时进行的，并不是等数据读取完后在处理，那样效率太低。

当27.5秒数据读取完后，实际上已经将大部分数据已经处理了，剩下0.1秒处理最后一点数据。

那么，我们如何来评价读取数据的真实性能呢，答案是禁用所有的转换器，只运行读模块。

当禁用转换器后我们可以看到，记录读取数据的时间是5.4秒。