2006年07月_iteye_14736

DTS开发记录（9）－－数据迁移任务 DataTask

在DTS开发记录（1）－－系统总体结构一文中，我们已经看到，一次数据传递任务基于一个连接对和一个数据映射进行。但是之前，我们并没有提到“数据迁移任务”这个元素。随着设计的演化，我们发现一个数据任务已经不再仅仅是一个连接对加上一个数据映射了。现在，我们完全有必要把“数据迁移任务”这个概念抽象的表示出来，称之为DataTask。有了DataTask，我们的数据引擎就可以修改为基于一个指定的Dat...

2006-07-31 17:56:00 142

DTS开发记录（8）－－主键的影响

对于数据源向同一数据目标导出（我们称之为“数据汇集”）和增量导出来说，对主键的处理也是一个大的挑战。我先定义一下在本DTS系统中主键（PrimaryKey）的含义：PrimaryKey 表示主键或联合主键，PrimaryKey并不是针对某个数据库表的，而是针对某个特定的DataMapping而言的，它用于在数据迁移过程中来唯一确定数据源或数据目标中每条记录。所以，本DTS系统中的Primary...

2006-07-27 15:56:00 104

反射中使用 BindingFlags.IgnoreCase

我们经常需要通过反射来调用目标对象的方法或获取/设置目标对象的属性，Type.InvokeMember 方法签名如下： publicobjectInvokeMember(stringname,BindingFlagsinvokeAttr,Binderbinder,objecttarget,object[]args,CultureInfoculture); BindingFlags有个枚举值是...

2006-07-26 11:56:00 104

DTS开发记录（7）－－灵活的引擎 IAgileEngine

数据引擎是数据传递系统（DTS）的核心，正如游戏引擎是PC游戏的核心一样。 IAgileEngine从目前手上的DTS系统中不断的重构完善出来，虽然IAgileEngine已经不局限于在本DTS系统中使用，但是，我还是打算在这个系列文章中来介绍它。正如，任何事物都有最简单的雏形，IAgileEngine也是一样。DTS系统最初的引擎也是一个非常简单的引擎，随着功能不断的加入、完善，我们不断地对...

2006-07-20 15:56:00 77

DTS开发记录（6）－－数据映射

在DTS开发记录（4）－－映射列一文中，我们详细的讨论了参与映射的源列和目标列，在拥有了映射列的基本概念的基础上，我们可以讨论数据映射DataMapping了。数据映射主要由一组映射项（MappingItem）组成，它包含了源数据大纲到目标数据大纲的详细的完整的映射关系。首先要注意一点，数据映射与数据大纲绑定，但是并不与任何特定的数据库表绑定。这样，DataMapping可以运用在不同的数...

2006-07-14 16:56:00 85

DTS开发记录（5）－－挑战增量导出

增量导出恐怕是DTS系统中最艰难的部分了，我们曾考虑过很多方案，最后都因为需要表大纲做一定的假设而不具备通用性而放弃。有很多效率较高的方案，由于为了追求通用性而无法实现，因为现实的情况比我们理想的要复杂许多。下面将列举我们曾考虑的几种主要方案，这些方案乍一看似乎都很有希望，可通过层层分析，最后都因为复杂的现实情况而胎死腹中。1.触发器这是一个非常简单直接的解决方案，我们只需要将DTS引擎驻留在比...

2006-07-12 09:56:00 63

DTS开发记录（4）－－映射列

在DTS开发记录（1）－－系统总体结构一文中，我们介绍到映射列：“参与了数据映射的源列或目标列。注意，并不是所有的列都会参与映射，这是常见的情况。”1.映射列分为：源映射列和目标映射列。 publicinterfaceIMappingColumn{stringColumnName{get;set;}}publicinterfaceIDestMappingColumn:IMappingColum...

2006-07-10 17:56:00 130

DTS开发记录（3）－－连接与连接对

在 DTS开发记录（2）－－数据管道及插件一文中，我们介绍了数据管道，IDataPipeFactory的CreateDataPipe方法需要一个IConnection参数，这个参数就表示一个连接。 publicIDataPipeCreateDataPipe(IConnectionconn) IConnection的定义如下： ///<summary>///IConn...

2006-07-04 16:56:00 128

DTS开发记录（2）－－数据管道及插件

通过前面两篇文章（已于2006-07-03修正）的介绍，我们已经大致明白了系统的目标的总体结构，从这篇文章开始，我们将逐渐深入到系统内部。本文讲述数据管道，数据管道是用于在数据源/数据目标与DataTable之间进行数据传递的组件，它是与数据库类型和文件类型相关的，数据从数据源经过数据管道后，就变成与数据源类型无关的数据了，这样映射编辑和数据引擎便能对它们进行一致的处理。数据管道接口定义的类...

2006-07-03 09:56:00 71

feipigwang