新瓶装老酒：实时数据集成一

    面向服务的体系结构 (SOA)目前应该是一个很受欢迎的名词，中间件技术人员几乎到了言必称SOA的程度，数据集成当然也不例外，在Oracle openworld2008大会上，就推出了一堆数据集成的专场演讲，其中和SOA结合最紧密的就是实时数据集成 real time data integration。我总结了一下，实时数据集成一般分为两个处理过程：一是对数据按照SOA架构的需要进行整合加工形成可用的信息，二是将信息以符合SOA规范的方式发布出去。具体的实时数据集成模式可以按照对这两个处理过程的设计分为以下四种：

1.       在中间件层上进行数据的加工整合，同时通过中间件层的标准接口将整合后的数据以标准接口发布。

2.       数据源层负责数据的加工处理，然后将整合后的数据以标准的接口发布到中间件层，由中间件层负责数据的访问。

3.       将分散在数据层的数据先整合到ODS或者数据仓库中进行整合加工，然后再将加工整理后的数据以标准接口发布到中间件层。

4.       采用数据网格的方式将数据层的数据整合在中间层，形成数据网格，中间件负责数据的加工，整合，然后以标准的方式发布出去。

我们先看第一种模式，数据集成发生在中间件层，数据发布也发生在中间件层，如下图所示：

 

 

 

在中间层上存在一个虚拟的数据服务层，该层通过JDBC，FILE适配器、应用适配器等与数据层的各种数据源实现连接，将数据源中的各种数据实体映射成中间件的虚拟数据层的表，虚拟数据层中的表都只有元数据，而不存储实际的生产数据。用户可以在虚拟数据层上采用可视化图形界面定义数据映射关系，进行数据加工整合，这些数据加工逻辑一般会以文件或者数据库方式存储。定义好的数据可以通过web service，JDBC,数据对象等多种方式发布出去。当用户通过中间件访问虚拟数据层的数据时，虚拟数据层会根据系统定义的逻辑首先将需要加工的细节数据从各个数据源抽取到虚拟数据层，然后中间件根据设计时的数据加工逻辑对其进行加工，最后中间件将加工好的数据以调用接口要求的格式返回。

 

3.GIF

来自 “ ITPUB博客 ” ，链接：http://blog.itpub.net/16312004/viewspace-478456/，如需转载，请注明出处，否则将追究法律责任。

转载于:http://blog.itpub.net/16312004/viewspace-478456/