四十三、ETL工具的流程和应用

最新推荐文章于 2023-01-31 16:02:55 发布

智享AI

最新推荐文章于 2023-01-31 16:02:55 发布

阅读量801

点赞数

分类专栏：数据挖掘文章标签：数据挖掘

本文链接：https://blog.csdn.net/guangzhanblog/article/details/114009683

版权

42 篇文章 23 订阅

订阅专栏

Kettle应用步骤的作用：用来转换提供的一些工具类步骤。具体的内容包括：

在Kettle工具中，可以通过Switch/case、过滤记录和更具Java表达式完成数据的过滤。各自的特点包括：

在Kettle工具中，可以通过检测空流、识别流的最后一行和阻塞数据方式实现，各自的内容包括：

实现多来源数据行的前后合并，可以通过空操作、追加流和数据流优先级排序等方式。

上面三个步骤都用于把多个来源的数据行，按照前后方式合并，类型 union。要求列名、列数、列类型相同。
在这里插入图片描述

在在Kettle工具中的流程步骤中，数据流的终点包括空操作、终止、复制记录结果和设置变量等。

kettle流程步骤中还有哪些其他的流程控制步骤，各自有那些作用？

Kettle应用步骤的NULL值处理和如何启动其他程序包括：

NULL值处理
1. 把NULL值变成指定的值
2. 把指定的值变为NULL
如何启动其他程序：
1. 启动本地程序：使用Java的Runtime
2. 运行SSH命令：启动远程机器上程序
  - 本地和远程机都是Linux
  - 要提前设置ssh-keygen

在这里插入图片描述
Kettle应用步骤的日志功能和文件处理功能包括：

在这里插入图片描述

关注

专栏目录