基于MDM的数据整合的研究背景

20世纪90年代末，Gartner Group（美国加纳公司）的Howard Dresner首次提出了商业智能的概念，由此促进了数据整合技术同企业决策管理的结合。根据美国AT Kearney针对2002年企业信息化的调查报告，从2002年开始，企业信息化市场的重心开始从过去ERP市场转向以决策支持为主的商业智能市场[1]。

随着商业智能技术在企业中的不断普及，国外众多知名IT商都不断推出各类商业智能技术和解决方案，来满足不断扩大的市场需求。如Oracle推出了商业智能基础（Oracle Business Intelligence Foundation），IBM发布了系列BI解决方案，SAP推出了BRIO解决方案，微软也推出了系列商业智能产品（SQL Server2005、SQL Server2008、Microsoft Office2007、Microsoft Office SharePoint Server2007以及Microsoft Office Performance Point Server2007）。

商业智能通过对企业数据快速的搜集、处理、分析，进而有力支撑管理决策，加强了企业应对风险的能力。在全球金融危机爆发后，企业越来越重视获得可信赖的信息，确保所有企业客户、产品、供应链以及销售数据能够准确、及时、方便的获取。因此如何应用商业智能技术提高数据质量，从而有效支撑企业运营，控制和规避各种决策带来的风险，是目前商业智能研究的重点。

我国仅有少数商业智能系统成功应用的案例，多分布在电信、银行、金融、政府、零售、能源、制造等行业。近几年来，随着我国出现的众多资产重组、行业联合、跨行业兼并等企业扩张行为，涌现出了众多的集团公司，这类集团公司对企业的管控力度要求较高，从而促使商业智能系统不断应用各类数据整合的方法论，实现与企业管控的结合。

但以上企业在商业智能系统应用的过程中，始终面临三大难题，即系统异构、语法异构、语义异构[2]：

（1）系统运行平台的异构。包括应用系统所依托的硬件平台、操作系统平台、数据源存储位置、数据库管理平台以及网络通信协议的不同；

（2）语法异构。即数据源中的数据采用了不同的描述模式、描述语法以及数据类型；

（3）语义异构。即数据源的数据涉及不同的应用领域，具有各自的语义范畴，即语义主题异构；不同的数据源内部定义了不同的规则和约束用来表述数据本身和数据间的语义，即语义结构异构。

基于主数据管理的数据整合方案的推出正是针对以上问题，能有效将分布在企业各处的数据，合并成规范统一的版本，供企业领导决策使用。

    基于主数据管理（Master Data Management, MDM）的数据整合方案研究尚处于发展阶段，当前一些著名的IT服务提供商，例如IBM、SAP、IDC等，提出了一系列基于MDM的数据整合实现方案，并开发了相应中间件，用于解决数据集成问题，但基于MDM的成功应用不仅要涉及数据整合技术，还涉及企业管理变革、一系列数据维护管理体系的建立，因而对于企业的运作模式和效率有较高要求，导致现在还没有真正通用的基于MDM的数据整合系统出现。通过MDM数据整合方案实现数据的共享利用是目前的研究热点。在这种研究背景下，通过结合各类信息组织理论和信息技术，促进MDM数据整合方案的完善和实现具有极大意义：

    （1）促进信息技术与企业管控的深度结合

    数据整合平台能帮助企业及时准确的获取财务、人力资源、市场销售、生产采购等生产经营状况数据，解决信息的真实性、及时性和准确性的问题，并消除信息孤岛现象，提高信息的共享程度，从而使企业通过信息化加强企业的管控。

    （2）指导符合国内企业信息化现状的主数据管理产品开发

    现有的主数据管理产品并不适合中国企业的应用，这主要是因为业界IBM、SAP等公司的主数据管理的技术方法主要集中在对已有系统的数据整合和管理的方向，这是和国外企业信息化程度高而不想废弃现有系统的现状有关，这种扭曲的基于主数据管理的数据整合相对系统的重新开发来说效率要高，因此更能得到国外企业的青睐。但是国内企业的信息化程度普遍较低，因此很难实施已有的主数据管理整合方案。在考虑我国企业信息化现状的情况下，实现MDM主数据管理方案的完善，可以指导新型主数据管理产品的开发，从而加强主数据管理产品在我国的应用。

    （3）指导企业的信息化建设

主数据管理方案是针对企业数据整合的三大难题提出的，因此根据主数据管理方案制定的各类标准，对企业信息化建设具有规范作用，能避免企业走国外企业的老路，即“先出现信息孤岛，再解决信息孤岛”，从而节省新系统的开发难度、成本。

    （4）规范企业的数据组织

国内众多企业中的业务数据，几乎以一种无序的状态存在于各个部门和系统中，各类数据关联性不强，导致企业对于数据重利用的效率极低。基于主数据管理的数据整合方案是从数据整合的角度来构建企业数据的组织模式，因而对于企业数据的规范具有极大的指导作用。

从全球范围看，数据整合已经有多种集成解决方案和体系结构，它已成为指导企业ERP建设和其它信息化建设的有效方法，同时也是继ERP建设完成后的一大企业数据建设重点。到目前为止，IBM、Oracle、Sybase、NCR、Informix、Microsoft和SAP等公司已经陆续推出了自己的数据整合方案。目前在国外，被广泛采用的典型整合方案有MDM（主数据管理）、DW（数据仓库）、中间件、Web Service等，数据整合已成为企业数据再利用的有效途径。

基于MDM的数据整合理论是目前国外数据整合领域研究的重点，IBM、Oracle、SAP等大公司不断推出自己的MDM数据整合方案和系列产品，如IBM在2008年发布了主数据管理软件IBM InfoSphere MDM Server，同时制定了以“InfoSphere”命名的新产品线，包括IBM InfoSphere Warehouse，IBM InfoSphere MDM Server等产品； Oracle在2009年，发布了新的主数据管理产品Oracle Site Hub MDM；SAP推出的SAP NetWeaver已经成为主数据管理的主要产品。

随着我国企业信息化的不断普及，各企业对于数据整合的需求越来越强烈。但由于数据整合项目的投资较大，系统复杂，项目周期较长，再加上很多公司对于此技术寄予过高的期望，要求马上就能见到回报，好大求快，导致了数据整合项目的失败率非常高。基于MDM的数据整合在我国尚处于起步阶段，从各种资料上看，在我国只有少数企业有实施成功的案例，多分布在对数据流通性要求较高的行业领域。随着商业智能技术的兴起，我国的企业在实施商业智能系统的过程中，不断探索运用MDM数据整合方案来指导商业智能系统的建设，从而使得MDM数据整合方案逐步适应我国企业信息化现状，在商业智能系统中发挥越来越重要的作用。

为了提高数据在企业中的业务运作、管理控制、支持决策的效率和价值，当前国内企业的数据整合建设主要围绕以下方面：

（1）集中解决数据的组织模式，即有效表示和挖掘数据的内在关联性、独立性等，使各类数据在中心数据库中以有序的状态呈现，同时能以较小的代价向各个应用服务提供准确、可靠的数据。

（2）深入挖掘数据再利用服务，即分析数据的关联、内容等特性，结合各类实际需求，解决数据的再利用模式。

（3）针对数据整合平台的数据量巨大、数据类型繁多的情况，完善已有的数据维护策略，使其更为有效的保障数据准确性、有效性、权威性。(作者:周欢)