kettle案例-多路数据合并连接

最新推荐文章于 2022-12-08 10:34:15 发布
最新推荐文章于 2022-12-08 10:34:15 发布
阅读量372 收藏 2
点赞数
分类专栏： kettle 文章标签： 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/wt_125/article/details/127972377
版权

 5.1.2 多路数据合并连接

1.建立转换

 

2.配置语文，英语，数学成绩控件

 

 3.配置三个排序记录

4.配置Multiway merge join控件

 5.配置计算器控件计算总分

 

 6.配置字段选择控件

 7.配置排序记录控件

8.运行转换

wt_125
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Kettle 合并记录和Merge Join组件实现数据增量迁移（数据同步比插入更新快
08-12
NULL 博文链接：https://forlan.iteye.com/blog/2245814
8.3.0.0-371 pentaho-kettle kettle-core
04-10
8.3.0.0-371 pentaho-kettle kettle-core
kettle （ 第五章 多路数据合并）
qq_56905137的博客
12-08 2601
多路数据合并
kettle实例--高级转换-记录集合并
fxxhmn的博客
10-25 1679
在图【多路数据合并连接Multiway merge join】转换工程中，单击【核心对象】选项卡，展开【连接】对象，选中【Multiway merge join】组件，并拖曳到右边工作区中，并由【语文成绩排序】【数学成绩排序】【英语成绩排序】组件分别指向【Multiway merge join】组件，分别建立3个节点连接，如图所示。（1） 接着配置【排序记录】组件，再分别由【成绩】组件指向【排序记录】组件，建立节点连接，设置排序参数，对“学号”字段进行排序。1. 建立【多路数据合并连接】转换工程。
kettle 数据流合并，新增方法
热门推荐
YrI/OG
03-21 1万+
网上参考了大量方法，有的不知所云，有的版本较低已不再合适，最近的项目中用到了这个经过一天多实验思考终于解决了，在此分享出来1，首先表输入里添加两个数据库，我这儿是mysql和hive的数据库连接然后添加合并记录，里面这么配置这儿要注意，标致字段可以用默认，等会要用到2，添加过滤记录其中一定要配置上面的标准字段然后数据数据流就可以了这儿为什么要这么过滤呢，原因是我再debug时发现的合并标识这儿会将...
kettle文件操作节点
qingxinziran007的专栏
03-15 702
上篇文章回顾： 上篇文章主要讲了如何使用get节点和post节点从网络中来获取数据，除了从网络这种数据源之外，更多的是从本地文件来读取数据。本地文件有excel，txt，json串，xml文件等，这些不同格式的文件是如何进行解析的呢？本篇内容主要讲解如何通过kettle的文件处理节点来从本地文件获取数据。 获取excel数据： 最终展示结果如下，预览数据展示的就是从excel中读取的数据，具体是如何实现的呢？ 第一步：将“Excel输入”节点拖拽到工作区，如下图所示 第二步：双击“Exce
【Kettle】Kettle常用组件作用记录集
我还可以
10-24 690
Kettle日常组件使用合集，持续更新中
ETL之kettle基础-PPT讲解
08-21
内容概要：ETL之kettle包含26张PPT，kettle安装、使用、如何连接等，使用PDI9.2演示、什么是ETL、什么是Kettle、kettle安装、kettle目录结构、转换和作业、kettle操作、数据库连接、注意事项。 适合人群：具备一定...
kettle服务本地jar包，kettle-core，kettle-dbdialog，kettle-engine，pentaho
最新发布
11-16
kettle-core-7.1.0.0-12.jar kettle-dbdialog-7.1.0.0-12.jar kettle-engine-7.1.0.0-12.jar pentaho-metadata-7.1.0.0-12.jar
KETTLE时间戳-源数据自带时间
01-23
在两个数据库之间进行时间戳数据同步，本kettle脚本适合源数据库已带时间
KETTLE时间戳-源数据未带时间
01-23
在两个数据库之间进行时间戳数据同步，本kettle脚本适合源数据库未带时间
建立多路数据合并连接转换工程
m0_69235938的博客
10-21 218
记录集连接是两个记录集的合并，而3个及以上的记录集，采用多路数据合并连接的方式。多路数据合并连接英文名称为Multiway merge join，是对多个记录集的合并，效率更高，速度更快。
附加案例第五章：高级转换（一）
qq_51477731的博客
10-21 392
高级转换
kettle实例-高级转换-数据合并
fxxhmn的博客
10-21 1169
（1）建立【多路数据合并连接】转换工程。加入Excel输入控件,排序记录，记录集连接，计算器以及字段选择。后点击计算器控件，添加新字段来计算总成绩，字段A和B分别添加英语和语文，计算公式选择A+B。最后点击字段选择控件，在选择和修改一栏选择加入序号，学号，英语，语文，总成绩，如图。点击排序记录，在字段一栏添加字段名称为学号，如图。点击工作表，点击获取工作表名称，导入工作表。点击字段，点击获取来自头部的字段，导入字段。（3） 最后点击上方运行按钮，运行如图结果。（2）设置【多路数据合并连接】参数。
第六章kettle使用（多数据源合并）
m0_69235938的博客
10-16 591
通过Kettle工具将A公司和B公司的手机日销售数据合并到一个数据源（数据表company）中，也就是对文件company_a.csv和数据表company_b中的数据进行合并操作，并输出到数据表company中。
MySQL实战之四：Kettle连接与操作
小海鲜的博客
09-23 2124
步骤： 1.在MySQL数据库中建立test，新建表xs，xs中建立字段xuehao、xingming、zhuanye、xingbie、chengji。将字段xuehao设置为主键，输入数据如下图 2.运行Kettle，单击“文件”，选择“新建”-“转换”，在打开的界面中选择“表输入”和“文本文件输出”，拖拽到右侧工作区，并建立连接，如下图 3.双击“表输入”，在弹出的对话框中单击“编辑”，建立Kettle与MySQL的连接，设置完成后单击测试，查看连接状况，如下图 ...
Kettle之数据库连接方式
m0_69586799的博客
07-31 9996
Kettle软件主要提供了4种数据库连接方式，分别是JDBC、ODBC、OCI、JNDI，其中OCI只适用于Oracle。本文重点对使用比较普遍的JDBC和JNDI连接方式进行探讨。
kettle在job视图中两个步骤间连线黄锁和对号的区别。
IT小生
07-19 1万+
在连接两个步骤的时候 连线上的图标类型有三种：红色就不做说明了； 黄锁，将鼠标放到锁上会提示：“ this is an unconditional hop that means tha regardless of the execution result of 'start' the next job entries will be always executed” 这是一个无条件的锁，,意
6.1 多数据源合并
qq_46677624的博客
11-22 895
多数据源合并
kettle多数据源合并
06-02
在Kettle中，可以通过使用多个数据源来实现数据的合并。以下是一些合并数据源的方法： 1. 使用Merge Join步骤：在Kettle中，可以使用Merge Join步骤将两个或多个数据源合并。Merge Join需要两个输入流和一个输出流，输入流必须按照相同的键进行排序。Merge Join步骤将按照键匹配的方式将两个数据流合并。 2. 使用Join Rows步骤：在Kettle中，可以使用Join Rows步骤将两个或多个数据源合并。Join Rows步骤需要两个或多个输入流和一个输出流。输入流不需要按照键进行排序。Join Rows步骤将按照顺序将两个或多个数据流合并。 3. 使用Union All步骤：在Kettle中，可以使用Union All步骤将两个或多个数据源合并。Union All步骤需要两个或多个输入流和一个输出流。Union All步骤将按照顺序将两个或多个数据流合并，不考虑键。 总的来说，在Kettle中，可以使用多个步骤来合并数据源。具体使用哪个步骤取决于数据的特点和具体的需求。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值