【Kettle】连接控件（笛卡尔积 记录集连接）

最新推荐文章于 2024-05-28 09:49:16 发布
最新推荐文章于 2024-05-28 09:49:16 发布
阅读量1.2k 收藏 1
点赞数 2
分类专栏： Kettle 文章标签： 连接控件 笛卡尔积 记录集连接 kettle 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_41369191/article/details/105938827
版权

需求：

从Excel读取两位和三位数，完成两位数和三位数的组合（笛卡尔积）,把结果保存在Excel

 

拖入两个Excel输入组件、记录关联连接组件、一个Excel输出组件，并连接各个组件

 

配置 Excel输入组件

 

配置记录关联连接组件

 

配置 Excel输出组件

 

点击三角形箭头执行

 

  • 记录集连接 （内连接）

记录集连接类似数据库的左连接、右连接、内连接、外连接。 在进行记录集连接之前，应该要对记录集进行排序。

 

需求：

从Excel中读取employees和departments数据，进行内关联，左关联，右关联，全关联，把数据保存到Excel

 

拖入两个Excel输入组件、两个排序记录转换组件，记录集连接组件、一个Excel输出组件，并连接各个组件

 

配置 Excel输入组件

 

配置排序记录转换组件

 

配置记录集连接组件

 

配置Excel输出组件

 

点击三角形箭头执行

没去过埃及的法老
关注
  • 2
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
1.4 Kettle 数据同步工具详细教程
在路上的专栏
06-23 1651
Kettle，又名 Pentaho Data Integration（PDI），是一个开源的数据集成工具，最初由 Pentaho 公司开发。它能够从多种数据源提取、转换并加载（ETL）数据，适用于数据仓库建设、数据迁移和数据同步等场景。Kettle（Pentaho Data Integration）是一个功能强大且易于使用的数据集成工具，适用于多种数据处理和集成场景。其图形化界面和丰富的功能使其成为构建数据仓库、进行数据迁移和数据同步的理想选择。
kettle_10连接控件的使用
qq_31514193的博客
06-24 522
目录 1、合并记录 2、记录关联（笛卡尔输出） 3、记录集连接 1、合并记录 输入数据 1）新建下图所示转换，编辑输入，点击合并记录 flag field字段说明：这个字段时添加到合并后的文件中用于表示新旧数据之间变化的字段。 identical：表示新旧数据相同。 changed：新数据与旧数据不同。 delete：旧数据中有，新数据中没有。 new：新数据中有，旧数据中没有。 2）保存转换，点击启动。查看输出文件。 2、记录关联（笛卡尔输出） 3、记录集连接 ...
Kettle(记录集连接)
写的不好之处,请指教
04-30 3169
Kettle(记录集连接) 原始数据 操作 结果数据
Kettle8.2连接组件之记录集连接
若兰幽竹
04-12 1956
Kettle8.2连接组件之记录集连接一、相关说明二、设计转换三、转换配置四、运行转换五、结果分析 一、相关说明 连接组件说明： 连接是结果集通过关键字进行连接。 记录集连接组件说明： 记录集连接就像数据库的左连接、右连接、内连接、外连接。 注意： 在进行记录集连接之前，应该要对记录集进行排序。 需求说明： 从数据库中的sys_user表和sys_dept中读取数据，进行内关键，左关联，右关联，全关联，把数据保存到Excel。 测试数据源和如下博文中的数据源是一样的： Kettle8.2
Kettle学习之记录集连接
qq_40096858的博客
03-20 4043
Kattle学习之记录集 在kattle的表输入中，作数据的抽取往往会用到JOIN条件，即LEFT JOIN ,RIGHT JOIN等。在kattle中，记录集组件可以当作JOIN条件使用，特别是当两张表不在同一个数据库中，记录集组件能够使表拼接起来。 ...
kettle案例-记录集连接
wt_125的博客
11-23 1024
数据清洗
记录集连接——kettle开发25
最新发布
java程序员的蜕变之路
05-28 380
弄清楚对应记录集连接的语法后，我们来完成这么一个任务，从Excel中读取employees和departments，进行内关联、左关联、右关联、全关联，把数据保持至Excel。记录集连接就像数据库的左连接、右连接、内连接、外连接。需要注意的是，因为我们是对数据流进行操作，因此我们在进行记录集连接操作前，需要先将数据进行排序。新版的KETTLE，名字都改了，叫Merge join。
kettle常见控件（输入、输出，字段选择、设置变量、记录集连接、值映射、字符串替换、js、Java）的使用案例
07-18
- **Join Rows (cartesian product)**：此步骤实现多表连接，可以是笛卡尔积连接或其他类型的连接，如INNER JOIN、LEFT JOIN等。 6. 值映射： - **映射输入/映射输出**：用于数据转换，比如将特定值映射为其他值...
kettle控件的作用
weixin_37849508的博客
12-13 767
kettle控件汇总： 一、文件输入： csv。 文本文件。 excel 多文件合并 getdatefromxml jsoninput 生成数据（生成相同的静态数据，如相同三百条的2列数据。） 表输入（即连接数据库输入）。 自定义常量数据：用来生成一些不变的数据。 二、文件输出： excel输出 文本文件输出 表输出（即连接数据库输出） 更新（只更新已有的字段内容） 插入更新（如果目标表中有数据，即更新，如无，则插入。） 删除。 三、转换： concat fields：将多个字段连接形成一个新的
kettle>Kettle流程控件
qq_44509920的博客
05-03 826
文章目录Kettle流程控件Test17 switchTest18 过滤Kettele连接控件test19 连接控件-笛卡尔积test20 记录集连接 Kettle流程控件 流程主要用来控制数据流程和数据流向 switch/case组件让数据流从一路到多路。 Test17 switch 实现步骤： 1、拖入 JSON输入组件，switch/case组件，三个Excel输出组件 ...
学习笔记之kettle基础
菼执的博客
06-16 2541
kettle简介 ETL简介 ETL（Extract-Transform-Load的缩写，即数据抽取、转换、装载的过程），对于企业或行业应用来说，我们经常会遇到各种数据的处理，转换，迁移，所以了解并掌握一种etl工具的使用，必不可少，这里我要学习的ETL工具是Kettle！ kettle简介 Kettle是一款国外开源的ETL工具，纯java编写，可以在Window、Linux、Unix上运行，绿色无需安装，数据抽取高效稳定。 Kettle 中文名称叫水壶，该项目的主程序员MATT 希望把各种数据放到一个
将两个表的数据通过笛卡尔积输出到新表中
07-03
将两个表的数据通过笛卡尔积输出到新表中，通过Kettle 转换的形式跑的
kettle开发篇-记录集连接-Day28
qq_29061315的博客
12-26 1964
前言： 昨天我们讲了记录关联(笛卡尔积)，也学习了类似内连接的流查询，类似数据库左连接的操作，数据库查询，今天我们来学习，记录集连接，来综合讲讲实现类似，数据库的内连接、左连接、右连接的操作，记录集连接。 一、记录集连接 记录集连接就像数据库的左连接、右连接、内连接、外连接。 需要注意的是，因为我们是对数据流进行操作，因此我们在进行记录集连接操作前，需要先将数据进行排序。 从记录集连接的...
Kettle中的连接介绍
热门推荐
andyzhaojianhui的专栏
12-08 1万+
一、记录关联(笛卡尔积输出) 两个数据集A和B做笛卡尔积运算，输出结果为合并的结果 使用场景： 1.用于类似java中的for循环，每次for循环内部都需要一个for外部的变量进行运算时，此时的A结果集总数可以为1，B结果集>=1，A（笛卡尔积）B---->C 可以参考同步实时数据的etl从redis中获取实时数据的案例 二、记录集连接 类似数据库中的几种常见连接方式，
Kettle(连接控件-笛卡尔积)
写的不好之处,请指教
04-29 3022
Kettle(连接控件-笛卡尔积) 原数据 操作 结果数据
kettle 两字符串作笛卡尔积
wengyupeng 蜗牛一步一步向前。。。
08-07 4801
1、问题 有两列数据  a,b 具体如下，要得到列c，c是a和b的笛卡尔积  a         01   02  03 ....09  10  11 12 ..99    (两位数)  b        001  002   003 ... 010 ..011    999   (三位数)   c    01001     01002  01003 ...
常用步骤-记录集连接
一只破碗
01-10 461
步骤解析：类似关系数据库将两个表做join操作，这里不限数据库不限文本文件，目标都是两道行流。支持内连接、外连接等 第一个步骤选择其中一个行流，比如文本 第二个步骤选择另外一个行流，比如数据库表 选择连接类型，编辑两个行流的连接字段 切记：连接之前的两个步骤都需要进行排序 ...
Kettle基本使用（六） —— 连接 & 统计 & 映射 的使用
qq_52421831的博客
10-26 5439
Kettle基本使用之 连接 & 统计 & 映射 的使用
Kettle第五章-高级转换
CC的博客
10-21 4737
kettle高级转换，记录集连接，多路数据合并，公式转换。
kettle记录集连接
07-29
在Kettle中，记录集连接是一种常见的数据处理需求。它可以用于将两个表的数据连接起来，特别是当这两个表不在同一个数据库中时。记录集连接可以通过使用表输入和排序记录集组件来实现。首先，使用表输入组件将第一个表的数据读取到Kettle中。然后，使用排序记录集组件对第一个表的数据进行排序。接下来，使用表输入组件将第二个表的数据读取到Kettle中。最后，使用记录集组件将两个表的数据连接起来。这样，我们就可以在Kettle中完成表的拼接操作。\[1\] #### 引用[.reference_title] - *1* [Kettle学习之记录集连接](https://blog.csdn.net/qq_40096858/article/details/114858664)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^koosearch_v1,239^v3^insert_chatgpt"}} ] [.reference_item] - *2* *3* [Kettle案例总结一—多表连接(记录集连接)](https://blog.csdn.net/u011144425/article/details/79639803)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^koosearch_v1,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值