1.需求
将ods_cust_info表抽取到edw层,当表中有新增记录,只抽取新增记录,而不全表重新执行抽取。
2.操作
1.导入源表:从oltp用户下导入ods_cust_info表。
2.定义目标表:根据源表,在目标表新增edw_date日期字段,命名为edw_cust_info表,在edw用户下创建该表。
3.创建映射:
使用lookup查找转换组件,查找目标表edw_cust_info,设置目标表的edw_cust_id与源表的ods_cust_id相等,若没有相等,则说明是新增的数据,抽取到目标表中。
设置连接来源是edw层。
使用update更新策略转换组件,标记要插入、删除、更新或拒绝的记录的表达式,本需求是要求当edw_cust_id为空的时候就插入到表中