项目经验-陈竞

最新推荐文章于 2024-10-08 15:41:48 发布

best_dba

最新推荐文章于 2024-10-08 15:41:48 发布

阅读量1.5k

点赞数 1

分类专栏： “2006中国杰出数据库工程师评选”复选选手参赛文章集文章标签：数据库数据仓库平台产品数据挖掘 informix

本文链接：https://blog.csdn.net/best_dba/article/details/935824

版权

“2006中国杰出数据库工程师评选”复选选手参赛文章集专栏收录该内容

111 篇文章 0 订阅

订阅专栏

项目一：项目名称

项目简介（功能与用途）：

福建省电信数据仓库及经营分析系统。遵照电信集团公司最新的EDA企业数据模型为客户实施完整的BI解决方案，针对客户经营分析与市场营销的需要提供强有力的信息支持，为客户充分挖掘数据的价值，包含的模块包括建立在数据仓库基础上的多维分析，目标客户选取，数据挖掘等。

项目难点与解决方案：

客户的数据源繁多复杂，并没有集中完整的数据接口，数据的准确性和实时性要求高。

项目采用了IBM的商务智能解决方案，以DB2 EEE数据库作为数据仓库数据库，辅以Cognos为多维分析工具，Intelligent Miner为数据挖掘工具，由于ETL规则复杂且独立，因此项目根据自身的需求搭建了一套ETL平台，平台采用了SHELL脚本加SQL PL技术实现了所有的需求，且从业务逻辑中抽象出了业务实体，并且生成了一套十分有价值的脚本库，成功地解决了一些由ETL工具无法完成的任务。

项目成功与失败的经验归纳：

项目启动的初期数据库问题较多，一方面是系统导致的问题，另一方面是开发经验欠缺导致的问题。

由于采用了AIX上还不够成熟的JFS2文件系统，导致数据库经常出现异常，并且很难定位问题的根源，因此在生产系统环境的开发部署中还是应该采用成熟稳定的技术为宜。另外是需要让业务开发人员在开发之前熟悉一些DB2的特性，例如分区键的关键性，SQL优化器的特性，多节点特性等等，这些有利于开发人员少走一些弯路。

你在项目中岗位与贡献：

作为数据库管理员，主要负责系统的安装，维护，问题解决以及性能调优，并且以我所掌握的DB2产品知识为开发提供支撑和指导。此外我还在项目中承担部分的开发任务。

项目二：项目名称

项目简介（功能与用途）：

基于XML的实时数据集成。该产品能够在异构的企业信息环境中，快速建立一个统一的信息共享平台。解决信息孤岛问题，实现异构系统信息共享。该系统基于XML实现各种异构数据源的统一描述和管理，支持多种常用数据源，包括Oracle、SQL Server 2000、DB2、Sybase、Informix等关系数据库以及Excel文件、SNMP MIB和XML文件等。集成后的数据可以通过SQL/XQuery两种查询语言实现异构数据源的实时集成访问。

项目难点与解决方法：

由于在开发的初期，XQuery规范尚未成熟并在不断修改中，目前尚未有较全面支持XQuery1.0的编译器出现。同时XQuery到SQL语义无损转换困难很大，主要问题包括拆分、函数支持、聚集函数以及对联合操作的支持等。因此在这种条件下，要想利用XQuery达到SQL查询同等功能的可能性不大，且XQuery本身不支持更新操作，普及使用率极低，因此决定把SQL作为平台也添加到对外的数据源操作语言中，这使得我们的产品更具可用性，降低了中间件平台的复杂性。

项目成功与失败的经验归纳：

由于项目的复杂性和技术含量较高，不一定追求目标的一步到位，产品本身应该是更贴近于应用和用户。另外在项目的过程中一些开源项目也具有一定的参考价值。

你在项目中岗位与贡献：

开发人员，参与包括产品对外提供的JDBC驱动，产品的管理界面以及产品在SQL解析和调优部分的分析设计工作。

项目三：项目名称

项目简介（功能与用途）：

福建电信增值业务分析系统。由于大部分增值业务基础运营数据孤立地存在于各自业务平台中，且多数仍处于原始状态，没有有效地加以利用，而另一方面，针对增值业务发展决策行为的量化指标无处获取，这就为增值业务经营决策带来了障碍。增值业务综合分析决策系统，进行有效地管理和使用各项增值业务基础数据，将分析功能整合到统一系统中，构造全面完整的用户视图。

项目难点与解决方法：

项目的难点集中体现在业务子系统繁多，逻辑复杂，但流程同其他的BI项目有很大的相似性，很多组件甚至是模块都有复用的可能，避免了重复的开发工作。

项目成功与失败的经验归纳：

与业务子系统需要形成规约良好的接口才能避免后续问题的出现。

你在项目中岗位与贡献：

项目主要设计开发人员，包括用户需求调研，数据库概念模型及物理模型设计，代码编写等工作。