Kettle从入门到放弃

这个哥们的学习教程很全面表输出详解常见问题1.这里提示一下出现表输出的中文乱码问题的解决方案:  设置连接编码:characterEncoding utf8 2.只有job可以发邮件。transfer不可以发邮件,并且配置smtp时密码是授权码 不是账户密码...
摘要由CSDN通过智能技术生成

参考内容

表输出详解

学习思路

  1. 核心用来做数据同步,数据处理不是核心;
  2. 能代码解决的问题,决不用部件 ;
  3. 数据处理用代码更容易;

常见问题:

  1. 有些功能在transfer里面执行会报错,需要放到job里面,如设置变量,smtp

一 .核心

1.变量传递**

设置变量操作只在job中有效,在transfer中无效
先在transfer里面设置变量,但是不能在transfer执行,需要在job里执行
当天日期获得转化
在job里面可以执行成功

2.增量同步**

参考文章

删除了该文中的对日期后的数据的删除,因为后面同步对比的时候,会补全该时间段的操作。

思路:

设置增量时间区间,对该时间内的数据做增量(包含该区域的deleted,inserted,updated做同步)

步骤:**

1.设置全局变量,一个当天日期,一个时间间隔;
2.获取源表,目标表该时间段的数据,source_t ,target_t;
3.对比source_t ,target_t的数据 对比结果如下图;
4.对不同结果产生不同分支的操作

  • 2
    点赞
  • 33
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值