使用kettle一次简单的增量同步

1.kettle关于增量同步的方法网上也有很多,本人也是刚入门使用了比较简单的一种,通过设置变量实现简单的增量同步

2.源表结构,必须要有主键


3.主程序

转换set_var

获取目标表当前id最大值,存入变量中


trans转换

通过sql条件查询,获取更新的内容,再更新到目标表中

4.运行主程序

这种方式本质来说是通过sql条件查询,比较目标表和源表中不同的字段值,通过设置变量在源表中获取变化的数据,再通过插入更新到目标表中。对于实时同步可以通过计划任务设置执行周期,根据业务的要求不同程度设置时间周期

评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值