增量加载是指目标表仅加载源数据表中新增和发生变化的数据。优秀的增量加载机制不但能够将业务系统中的变化数据按一定的频率准确地捕获并加载到目标表中,同时还不会对业务系统造成太大的压力,也不会影响现有业务。
下面把通过kettle工具将数据表incremental_source中的数据增量加载到数据表incremental_target中,具体实现步骤如下:
表incremental_target数据展示
一,创建转换
二 ,配置”表输入“控件
三,配置“插入/更新”控件
增量加载是指目标表仅加载源数据表中新增和发生变化的数据。优秀的增量加载机制不但能够将业务系统中的变化数据按一定的频率准确地捕获并加载到目标表中,同时还不会对业务系统造成太大的压力,也不会影响现有业务。
下面把通过kettle工具将数据表incremental_source中的数据增量加载到数据表incremental_target中,具体实现步骤如下:
表incremental_target数据展示
一,创建转换
二 ,配置”表输入“控件
三,配置“插入/更新”控件