kettle中间表值映射

最新推荐文章于 2024-05-28 14:27:07 发布
最新推荐文章于 2024-05-28 14:27:07 发布
阅读量8.4k 收藏 9
点赞数 2
分类专栏： kettle 文章标签： 迁移 数据 值映射
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/hsb_lucky/article/details/75194966
版权

kettle源表经过中间表进行值映射迁移至目标表

下面举一个列子说明流程：


这是源表、中间表和迁移后表的数据对比。


这是数据迁移整体结构。


下面开始步骤：

两个表输入分别读取源表与中间表，这里因为两张表的CITY字段名相同，所以需要在中间表CITY字段名添加一个别名以分辨。

 

增加俩表的对应条件（源表/中间表CITY字段数据对号入座）

字段选择/表输出：这里是指转换到目标表所需字段，其余不要字段可删除；表输出指定目标表，执行完成。

 


流程设计完成保存，运行。。。OK了。。。


Hsb_Lucky
关注
  • 2
    点赞
  • 踩
  • 9
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【数据整合与处理ETL】kettle值映射具体操作步骤
qq_56912124的博客
03-21 2419
提示：本篇文章讲解很详细哈，欢迎大家互相学习~ 文章目录 前言 一、pandas是什么？ 二、使用步骤 1.引入库 2.读入数据 总结 前言 提示：这里可以添加本文要记录的大概内容： 例如：随着人工智能的不断发展，机器学习这门技术也越来越重要，很多人都开启了学习机器学习，本文就介绍了机器学习的基础内容。 提示：以下是本篇文章正文内容，下面案例可供参考 一、pandas是什么？ 示例：pandas 是基于NumPy 的一种工具，该工具是为了解决.
Kettle（八）：转换控件(Concat fields、值映射、增加常量、增加序列、字段选择)、流程控件（Switch / case、过滤字段）、连接控件（记录关联（笛卡尔输出）、记录集连接）
MengCXJ的博客
03-11 3034
本文介绍转换控件(Concat fields、值映射、增加常量、增加序列、字段选择)、流程控件（Switch / case、过滤字段）、连接控件（记录关联（笛卡尔输出）、记录集连接）
Kettle中的值映射的使用
AnameJL的博客
11-23 6651
KETTLE中的值映射的使用 用法一：生成新的一列，并且根据自己的需求，将对应值进行更改 在整个转换流程中添加一个”值映射” 双击”值映射”,在”值映射”配置窗口中进行配置 进行参数配置，配置讲解如下： ”使用字段选择”：选择好自己需要更改值的字段名(color)； ”目标字段名”：就是所要生成新的一列的字段名(new_color)； “不匹配时的默认值”：就是所选择的”使用字段名”的列中的值在没有匹配到的时候的默认值(紫色)； “字段值”：可以看到在”字段值”的下方有一个表格状的输入框，有”源值”
【ETL工具】kettle 根据时间戳增量的将数据从MySQL同步SQLServer（linux部署脚本启动作业、config.properties 配置数据库）
康师傅没有眼泪
06-10 2793
​从MySQL 按时间增量同步到 SQLServer，MySQL中的数据会源源不断的写入，不会删除数据， SQLServer根据 MySQL表中的 modifytime 做增量同步就好，三台阿里云机器做数据的接入、计算、同步。
映射——kettle开发27
最新发布
java程序员的蜕变之路
05-28 227
映射用来定义子转换，便于封装和重用。本次我们主要来讲解映射下面的三个子功能，分别为映射(子转换)、映射输入规范、映射输出规范。最终我们的转换由，表输入、映射(子转换)、Excel输出 映射输入规范、数据库查询、映射输出规范组成。users表的操作会经常用到，因此我们将u_id做成了映射(子转换)即可。操作起来也是相当的方便，我们只需要在组件里面选择我们需要的子转换即可。映射输入规范是输入字段，由调用的转换输入。，即我们在转换里面调用转换的时候可以用到。映射(子转换)是用来配置子转换，
Kettle8.2查询组件之数据库查询
若兰幽竹
04-11 2875
Kettle8.2查询组件之数据库查询一、相关说明二、设计转换三、转换配置四、运行转换五、结果分析 一、相关说明 数据库查询组件说明： 数据库查询就是数据库里面的左连接。 左连接就是两张表执行左关联查询，把左边的表数据全部查询出来。 需求说明： 从sys_user表中读取数据，根据dep_id从sys_dept表获取dep_name，保存到Excel中。 源表sys_user和sys_dept建表语句如下： sys_user表: CREATE TABLE `sys_user` ( `use
Kettle入门操作处理excel数据
July的博客
09-19 3490
kettle入门操作一：实现对excel表格转换 实验要求： 用Kettle完成下列实验，结果存储到MySql(或者CSV) 已知excel文件，包含列（姓名，年龄，身份证号码，性别，挂号日期时间，门诊号），数据若干(自己模拟) 生成数据1，包含列（日，性别，儿童/青年/中年/老年,人次），儿童/青年/中年/老年的年龄段自己定义 生成数据2，包含列（省份，hour,人次） 生成数据一转换流程图如图所示 excel输入模块 选择excel文件，并添加，然后获取工作表，获取来自头部数
kettle资源库表详解
03-23
在Kettle中，资源库表（Repository）是存储元数据和工作流的重要组成部分，它提供了版本控制、项目管理以及团队协作的功能。下面我们将详细探讨Kettle资源库表的相关知识点。 1. **资源库的概念** Kettle资源库是...
Kettle课程之映射控件.pptx
05-17
在案例中提到的映射分析，输入来自t_orders表的数据，根据u_id字段进一步查询t_users表获取用户信息，这就是映射输入规范的体现。 映射输出规范则指定了子转换完成后要传递给调用转换的所有列。这些列不经过任何...
kettle8.3表结构信息
03-10
Kettle8.3是其一个重要的版本，引入了诸多改进和新特性，对于理解和操作数据库的表结构信息至关重要。以下将详细探讨Kettle8.3中与表结构信息相关的知识点。 1. 数据库连接：在Kettle中，首先需要建立到目标数据库...
kettle循环抽取表数据.zip
11-10
每个步骤都有相应的配置，如SQL查询（用于选择表或特定数据）、字段映射、过滤条件等。 在实际操作中，首先，我们需要在Kettle中创建一个数据库连接，指定数据库类型（如MySQL、Oracle、Hadoop等）和连接参数（如...
Kettle实现多表数据全量抽取
01-28
【标题】"Kettle实现多表数据全量抽取"涉及的主要知识点是Kettle（Pentaho Data Integration，简称PDI）工具在数据处理中的应用，尤其是如何进行多表数据的同步与更新。Kettle是一款开源的数据集成工具，以其强大的...
kettle —— 数据过滤和值映射
qq_36688928的博客
07-03 2262
转自：https://blog.csdn.net/mafan121/article/details/42920411 kettle中间表值映射:https://blog.csdn.net/hsb_lucky/article/details/75194966 Kettle学习二：过虑数据表记录，当过滤成功后进行值映射并输出到文本文件 值映射：改变指定字段的值为特定的值。 1.建立如...
kettle从入门到精通 第十五课 kettle 映射 (子转换)01
zhangjin1222的博客
01-27 390
5）更多细节参考官网https://help.hitachivantara.com/Documentation/Pentaho/9.2/Products/Simple_Mapping_(sub-transformation)1、kettle 里面的映射和java代码里面的封装是一个概念，就是将一个可复用的模块单独抽离为公共模块供其他模块引用，用到的步骤或者组件如下。2、构建子映射，子映射需要用到映射输入规范和映射输出规范两个组件，相当于输入和输出参数，如下图所示。4）输出：输出参数设置。
Kettle 通俗易懂讲明白值映射
程志伟的博客
07-12 3152
关注微信公共号：小程在线 关注CSDN博客：程志伟的博客 只对核心部分进行详细描述 一、总体情况 由excel输入、值映射、excel输出三部分构成 二、Excel输入 excel输入和前面将的类似，不在重复描述 三、值映射 1.在使用的字段名：选择age字段 2.目标字段名：随便起一个名字 3.不匹配时的默认值：未知 4.在源值、目标值填写我们要映射的值 四、Excel输出 和前面的类似、就是选择输出路径 五、启动 六...
kettle-值映射(不同值映射不同结果)
weixin_41668007的博客
06-26 1619
输出设置 结果
kettle:字段的拆分、合并、值映射
热门推荐
weixin_44727274的博客
01-25 1万+
【实验目的】 1.利用Kettle的“拆分字段”，“字段选择”，“值映射”“JavaScript代码”组件，实现字段的拆分、合并、值映射。 2.熟练掌握“拆分字段”，“字段选择”，“值映射”“JavaScript代码”等组件的使用，实现字段的拆分、合并、值映射。 【实验原理】 利用“拆分字段”将表格的<课程大类>字段拆分为<课程大类>和<课程大类>两个字段； 利用“值映射”将表格的<讲师>为xx的替换为另外一个XXX； 利用“JavaScript代码”通过编程
Kettle使用规范
zhao_guo_feng的博客
12-16 752
1、 命名规范 ● 作业(job)：必须遵从驼峰形式。 ● 转换(transfsormation）：都统一使用 lowerCamelCase 风格，单词间用下划线隔开，力求语义表达完整清楚，必须遵从驼峰形式。 ● 中间表及中间列：“mid_”作为前缀。 ● 临时表及临时列：“tmp_”作为前缀。 ● 文件目录：/{项目名}/{业务主题名}/{功能}/{FILENAME}，功能根据文件的目的进行存放，例如EXF（抽取）、LD（装载）、REJ(拒绝)。 ● 参数及变量：参数与变量的命名全部大写，单词或者简拼间用
Kettle 值映射
weixin_30635053的博客
09-09 893
在费用转换里面做了两个值映射。一个是编码、一个是名称。其中两个值映射设置不一样效果不一样。 第一个编码映射 目标字段名不为空，则表示会新增字段。其中复核源值条件的都会转换为目标值，不符合条件的会用【不匹配的默认值】的字符串覆盖。那有人可能会问，如果不匹配的时候可否继续用原来的字段值来用？可以，看第二个值映射。 第二个值映射，继续沿用了工资类型字段，匹配条件则改为目标值，不...
kettle值映射使用
08-19
在Kettle中，值映射的使用可以有两种方式。第一种方式是生成新的一列，并根据需要将对应的值进行更改。在整个转换流程中添加一个"值映射"组件，然后进行参数配置。在配置窗口中，选择需要更改值的字段名，设置目标...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值