ETL-kettle-3.kettle多表合并判断抽取

最新推荐文章于 2022-11-23 11:41:43 发布
最新推荐文章于 2022-11-23 11:41:43 发布
阅读量7.7k 收藏 26
点赞数 5
分类专栏： kettle
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/sinat_35860785/article/details/89277016
版权
本文介绍了如何使用Kettle工具将Oracle中的四张表（学生、老师、成绩、课程）的数据抽取并合并到MySQL数据库中。通过建立数据库连接，分析表间关系，创建目标表，定义数据抽取规则，最终实现数据的导入和更新。主要步骤包括：连接数据库、理解表关联、创建MySQL表、Kettle中进行数据处理和插入更新操作。
摘要由CSDN通过智能技术生成

建表语句在上一篇已经写过了 就不写了哈
需求：
Oracle中一共有四张表，将每个学生的信息和学过课程科目的总数，抽取到MySQL的数据库表中

一、建立两个数据库的连接

二、分析表连带关系

三、在MySQL中创建表

四、在kettle中抽取、定义规则

五、实现

#一、建立两个数据库的连接以及共享连接在上一篇里面有写到，这里不赘述了。
#二、分析表的连带关系
这里我们看到一共有四张表 分别是 学生表、老师表、成绩表、课程表
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
也就是说
成绩表中的: sid 对应学生的sid 、cid对应课程表中的cid,score就是分数了
课程表中的：tid对应老师表中的tid

三、在MySQL中创建表

最低0.47元/天 解锁文章
山丁SOOK
关注
  • 5
    点赞
  • 踩
  • 26
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
ETL针对多节点合并表抽取数据合并案例
03-29
kettle 针对多节点合并表抽取数据合并案例，把数据从DC层抽取合并到ODS层
kettle 多表级联 将多个表格的查询的数据插入到一个表格中
热门推荐
bird_tp的博客
11-06 1万+
1.首先新建数据库表格 use testA; create table userC(     id int primary key,     name varchar(50),     age int ) go insert into userC values(10001,'张三',20); insert into userC values(10002,'李四',25); insert int...
kettle 常用的使用记录（多表根据条件输出到新表，字段不同映射）
蠢蠢欲动的猫
04-13 4530
kettle 常用的使用记录（多表根据条件输出到新表，字段不同映射）
kettle-8.3.0.0：MySQL字段合并
浅汐
12-29 696
目的 在数据库A和数据库B中分别创建表userA和表userB。最终目标为将数据表userA中的字段“surname”和“name”合并后的数据插入到数据表userB中。 create database testA; use testA; create table `userA`( `id`int(10) primary key, `surname` varchar(10),...
kettle多数据合并
m0_63747104的博客
11-23 4104
kettle多数据合并
kettle-sdk-plugin-assembly-8.3.0.0-371.zip
08-06
pdi-ce-8.3.0.0-371.zip-kettle8.3版本插件SDK包，适用于大数据ETL开发人员进行大数据抽取转换（清洗）加载的一款开源ETL工具，Pentaho DataIntegration，官方可扩展自定义插件模板
pentaho-kettle-9.0.0.2-R.tar.gz
11-12
转换负责从不同来源抽取数据，进行清洗、转换和加载到目标系统中，而作业则用来管理和协调多个转换，形成更复杂的流程。Kettle支持多种数据源，包括关系型数据库、文件系统、云存储、Web服务等，并且可以与大数据...
pentaho-kettle
06-08
3. **metastore-8.3.0.0-371.jar**：元数据存储库，是Pentaho Kettle用来存储和管理ETL过程中涉及的所有元数据的组件。元数据可以包括数据库表结构、转换步骤的配置、作业和转换的定义等。这个JAR文件包含了Pentaho...
kettle-neo4j-remix-8.2.0.7-719-REMIX.zip
03-19
《Kettle与Neo4j融合：深度探索数据仓库与图数据库的ETL实践》 Kettle，又称为Pentaho Data Integration（PDI），是一款强大的开源ETL（Extract, Transform, Load）工具，由KDE Extraction, Transportation, ...
pentaho-kettle-8.2.zip
08-13
Pentaho Kettle是一款强大的ETL（提取、转换、加载）工具，由Pentaho公司开发。这个名为“pentaho-kettle-8.2.zip”的压缩包文件包含了Pentaho Data Integration（Kettle）的第8.2版本。Pentaho Kettle通过图形化的...
Kettle实现多表数据全量抽取
01-28
Kettle实现多张表数据的定时删除全量抽取，删除旧shuju
pentaho-kettle-master.zip
03-18
ETL（Extract-Transform-Load的缩写，即数据抽取、转换、装载的过程， 我们经常会遇到各种数据的处理，转换，迁移，所以掌握一种 ETL 工具的使用必不可少。 Kettle 支持图形化的GUI设计界面，然后可以以工作流的...
webkitgtk-2.4.9-3.el7.nux.x86_64.zip
04-02
Kettle，也称为Pentaho Data Integration (PDI)，是一个开源ETL（Extract, Transform, Load）工具，它允许用户从各种数据源抽取、转换和加载数据。WebkitGTK可能作为Kettle的一部分，用于展示或者处理Web界面相关的...
ETL利器Kettle实战应用--Kettle使用介绍
02-26
即数据抽取、转换、装载的过程），对于企业或行业应用来说，我们经常会遇到各种数据的处理，转换，迁移，所以了解并掌握一种etl工具的使用，必不可少，这里我介绍一个我在工作中使用了3年左右的ETL工具Kettle,本着好...
ETL工具 Kettle用户手册中文版.zip
07-05
Kettle（Pentaho Data Integration，简称Kettle）是一款强大的数据集成工具，广泛应用于数据抽取（Extract）、转换（Transform）和加载（Load，即ETL过程）。它提供了图形化的用户界面，使得用户可以无需编写代码就...
kettle进行多表循环合并内容后多数据作为变量输出到另外一张宽表
李指导的博客
08-09 9887
前言: 本章使用kettle将mysql 100 (例如: A1、A2-A99 这样递增 ) 张表合并到 另外一张宽表中。 目录 前言: 一: 总览 二: getTableName转换 2.1 生成记录 生成100条 表名固定的名称A 2.2 增加序列 0-99 2.3 使用concat fields 将100个表名A和0-99的数字拼接起来 2.4 字段选择 三 ...
kettle多数据源多表关联同步到单表
weixin_43776949的博客
12-02 3003
kettle多数据源多表关联同步到单表 概述：在kettle中下图设计转换流程 说明：先在准备两个数据库，可以是不同数据库类型的数据库，下面采用mysql数据库为例，创建test_input数据库和test_output数据库。 分别在test_input数据库创建教师表teacher和教师课程关系表teacher_course。在test_output数据库创建课程表course。 在教师表创建测试数据，测试数据如下图： 在教师课程关系表创建测试数据，测试数据如下图： 在课程表创建测试数据，测试数
Kettle案例总结一—多表连接(记录集连接)
小小的博客
03-21 1万+
Kettle是一款国外开源的ETL工具，纯java编写，可以在Window、Linux、Unix上运行，数据抽取高效稳定。 Kettle这个ETL工具集，它允许你管理来自不同数据库的数据，通过提供一个图形化的用户环境来描述你想做什么，而不是你想怎么做。 Kettle中有两种脚本文件，transformation和job，transformation完成针对数据的基础转换，jo...
kettle-core-7.1.0.0-12.jar
最新发布
07-30
PDI是一款开源的数据集成软件，用于数据抽取、转换和加载（ETL）过程。这个核心库包含了处理数据抽取、转换和加载的功能和算法。 kettle-core-7.1.0.0-12.jar 提供了一系列的类和方法，用于创建和管理数据转换和...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值