拉链表或是type2表脏数据修复问题
表名ABC
字段
ACCT_ID PROD_ID ETL_LOAD_DATE ETL_UPDATE_DATE ETL_CURR_FLAG
522 6437 2/1/2013 2/2/2013 D
522 6437 2/3/2013 2/4/2013 D
522 6437 2/7/2013 2/8/2013 U
522 6437 2/8/2013 2/9/2013 D
522 6437 2/28/2013 3/31/2013 D
ACCT_ID和PROD_ID是联合主键
要把数据修复成如下:
522 6437 2/1/2013 2/3/2013 U
522 6437 2/3/2013 2/7/2013 U
522 6437 2/7/2013 2/8/2013 U
522 6437 2/8/2013 2/28/2013 U
522 6437 2/28/2013 12/31/2999 I
U is update
D is delete
I is insert
就是把这张表按主键分组,找到最大的ETL_UPATE_DATE, 把它转换成29991231;ETL_CURR_FLAG转换成I
ETL_UPDATE_DATE 非最大的,所有ETL_CURR_FLAG转换成U;ETL_UPDATE_DA