kettle常用功能

Kettle

Kettle是一款开源的ETL工具，纯Java编写，工作中经常用到一些转换，特此记录。

1. 回刷历史数据

如果历史数据需要大批量回刷，按照时间段跑数据，动辄几亿甚至千亿的数据操作会造成数据库断连，Select的时间可以达到十几分钟，按日跑需要不断地进行改参数，循环脚本可解决。

job中对ETL参数做初始设置：

select  		to_number(to_char(date('20210731'),'yyyymmdd')) as P_SYSDATE_NUM,
                to_number