kettle实战笔记(一)

之前一直用python连数据库回刷历史数据,用了kettle之后就很香,拖拽几步就能实现,性能还高的一批,安利安利!

kettle的数据分发和复制

需求:回刷表中2021年全年数据

连接组件出现支路的时候跳出这个提醒,我直接按了分发,结果查看数据库中日期只有奇数日,出现错行跳行的情况,多次重跑还是 存在数据缺失,排查了半天才知道是分发的问题。

分发

数据一分为二,分给两条支路
在这里插入图片描述
复制

数据复制两份

在这里插入图片描述
重新连接,问题搞定!!

kettle发送邮件

问题:kettle定时发送邮件,数据以附件的形式保存,数值较长的字段在excel中会显示科学计数法。

这个问题百度了一下,不是kettle本身的问题,使用的CSV格式,Excel超过15位的数字默认就会转换为科学计数法。

解决办法:
Sql提取该字段的时候进行处理,拼接单引号。需要注意的是:单引号需要用双引号括起来,例如"’"||a

  • 2
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值