本文介绍了Kettle在数据检验和统计方面的应用。数据剖析使用DataCleaner插件进行，包括数据类型、长度和值域的分析。数据校验则涉及错误代码和字典表匹配，可配合SWITCH CASE进行后续处理。此外，文章还探讨了Kettle中的统计功能，并讲解了如何在脚本中使用JavaScript，包括调用Java类、获取和设置字段值的方法。
概述
数据剖析和数据检验：用于数据的检查、清洗 。
统计步骤：提供数据采样和统计的功能。
分区：根据数据里某个字段的值，拆分成多个数据块。输出到不同的库表和文件中。
脚本：Javascript 基础
数据剖析和数据检验
1.数据剖析
分析原始数据的数据类型、长度、值域等，属于ETL的第一步
kettle中使用DataCleaner进行数据剖析
首先需要在工具-marketPlace中安装改插件并重启：https://wiki.pentaho.com/pages/viewpage.action?pageId=23533803
2.数据校验
示例可以查看samples，可以配置例如错误代码，字典表校验等：
一个简单的检验如下：
也可以后面接SWITCH CASE，通过错误代码等进
最低0.47元/天 解锁文章
776
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
