oracle数据库渐变色,SSIS高级转换任务之渐变维度详解(2)

创建一个package，命名为SlowChangingDemension。创建一个Data Flow Task点击进入Data Flow界面。在Data Flow界面内下面的ConnectionManageers内新建一个Flat File Connection连接上面的文本文件，选择第一行作为列名如图4。在高级标签内设置EmployeePlanNbr和PayDeductType两个列的长度是10，设置EmployeeID的类型是32-bit Integer [DT_I4]，设置DeductionAmount的数据类型是currency[DT_CY]，如图5。

图4

图5

使用上述连接添加一个Flat File DataSource

添加一个渐变纬度任务，将Flat File DataSource和它连接起来

查看PayrollDeductItem表的内容如图6，你可能会奇怪为什么会有一些多余的字段例如HistTextStatus， HistBitStatus， HistStartDate， HistEndDate，在执行task的时候并不是所有的字段都用得上，我们会根据不同的设置来使用不同的列。注意这个截图是我执行这个SCD之后的表，数据已经被修改。

图6

初次打开SCD的时候，设置向导会展开四个设置步骤，这些步骤如下：

维度表和维度选择步骤：这个步骤中设置维度表的位置，输入数据和维度表中对应字段，和使用那些字段作为主键以便一一对应。那些需要对应的字段将会被覆盖或者更新，还需要设置那些字段作为主键字段，以便对应。双击打开Slow Changing Demension进入向导设置界面，点击下一步进入Select a Dimension and Keys界面，首先选择数据库AdventureWorks和这个数据库下的表PayrollDeductItem作为Dimension Table，Imcoming columns这一列中的数据一部分被作为Business key来匹配Dimension Columns中的对应列，剩下的作为更新数据源，这里EmployeePlanIDNbr，EmployeeID两列作为Business key，剩下的两列默认Not a key column。这里注意到必须选择一列作为Business key才能进入下一步设置。设置好的界面如图7

图7

渐变维度设置步骤：这个步骤只关心在第一个步骤中未被设置为主键字段的的那些字段。在这个步骤中将设置按照什么样的策略来更新这些字段。在运行的时候目标表中的数据将按照这些策略来更新。这些cerulean如下：

固定属性: 在维度表中的值是固定的，如果输入数据源中的数据有变动，将会报错。

更改属性：维度表中的数据总是被输入数据源中的数据覆盖掉。这是相面讨论的类型2。

历史属性：维度表中的数据和输入源中的数据会有不同，但是有重大意义，将会被保存起来。

如图8

图8

在这个例子中，点击下一步进入Slow Changing Dimension Clumns界面，上一个步骤中设置为默认Not a key column的两个列将会出现在这个步骤中，在这里他们作为更新Dimension Table的两个候选列。在Changing Type中选择修改属性为更新属性的或者历史属性，如果选择更新的，遇到匹配项的时候这一列的值将会被修改。如果选择为历史的将会评估变更，如果检测到更新，将会根据选择的历史变更添加一个新的行。这里我们做一个试验，将DeductionAmount和PayDeductType都选择为更新的。

固定和更新属性设置：点击下一步会看到如图9。在这里如果选择了固定属性，如果数据不同通过这个设置可以在运行时报错。前一个步骤我们没有选择更新属性，所以这里是灰色的不可用。另外一个选项设置是否覆盖当前活动数据，或者覆盖活动和实效的数据。

图9

历史属性设置步骤：只有在第2步骤选择历史属性会有这二个设置步骤。如果设置了历史的属性，那就是类型2。有两种方法来保存历史数据。每一种都会新插入一个行。我们来看这两个设置。

使用单独的行来显示当前的何过期的数据：这个选项允许在维度表中选择一个列，这个列用来标识这一行数据是老旧的，而另一行数据是更新的。在SCD中有两组值用来标识数据的时效性：True/False，Current/Expired。

使用开始时间和结束时间来标识更新的和老旧的数据：这个选项会使用维度表中的的两个列来标识这一行的有效期的开始时间和结束时间。要注意的一点是要使用一个时间变量来给这些列赋值。

这里既然DeductionAmount字段为历史的，PayrollDeductItem表中的一些看起来冗余的字段就有用了，这些字段可以标记这一行数据的不同的生效时间。选择变更类型为历史的时候字段HistStartDate和HistEndDate用来记录有效时间。当使用新加列的方法时这两个字段会变成false和Expired，新添加的一行将会是ture和Current。如图6-23示例说明如何使用HistStartDate和HisEndDate。设置时间值选项有一些系统变量，也可以使用自定义的变量，这里我们设置为System::StartTime然后点击下一步。

推断成员选项设置：当你从其他表中将数据导入到维度表中，但是维度表中的数据列不全或者你想过一段时间再执行它，可以在这个步骤中设置。这里我们不设置这个选项，如图10。

图10

完成向导步骤：使用这个步骤来完成整个SCD的设置，如图11。

图11

在这个例子中，我们要判断维度表中那些字段作为主键，在PayrollDeductItem表中我们可以判断出[EmployeeIDNbr]字段是员工号，这个是不会改变的，另外[EmployeeID]也是不会改变的，这两个建组合成一个主键可以唯一标识一行数据。[PayrollDeductItemID]字段在这里不选择作为主键，因为在输入数据源中没有这样的一个字段。当运行的时候这个字段不能帮助我们判断这个行应该更新或插入到维度表中。

另外一个重要的设置是输入数据源中有匹配的数据的时候选择什么样的策略来更新维度表。举一个例子，在输入源数据中[EmployeePlanIDNbr] = "0000000001" [EmployeeID]= "1"， [PayDeductType] ="401"这一行数据中对应的DeductionAmount是225.00，而在维度表中对应的值是200.00，我们应该怎么设置呢？下面的表格给出了选择项和对应的结果。

图12

按照表中提示的信息，我们双击打开SCD，点击下一步转到选择主键选择设置。首选必须新建一个OLE DB数据源，并从数据源中选择维度表PayrollDeductItem。所有作为主键的字段和作为更新的字段都砸这里选择设置。默认的设置是“Not a key column”。在这里[EmployeePlanIDNbr]和[EmployeeID]选为business key。注意这里至少要选择一个列作为主键，否则不能点击下一步。最后的设置效果如图7。