抽取模式通常分为完全抽取和增量抽取。完全抽取是每次抽取的时候讲数据源可用的所有数据都抽取过来,而增量抽取则是每次抽取的时候只抽取更新和增加了的新的数据。
完全抽取:Extraction Model = Full
增量抽取:Extraction Model = Delta
(1)delta是最有用的技术之一了,没有它,大数据处理就没有可能, 所以BW的重要发明之一就是delta。delta来自changelog,也就是说CDL dso 在进行delta上数的时候,究竟是上几条数据,取决于IDL dso中最后一次Active Data操作中产生了几条Change Log记录。
(2)Full模式上数的时候,full load的时候并不从changelog里面取数,而是取的active table的数这个和delta原理是不同的