Kettle 列拆分为多行、列转行、行转列

最新推荐文章于 2024-07-11 16:20:36 发布
最新推荐文章于 2024-07-11 16:20:36 发布
阅读量2k 收藏 5
点赞数
分类专栏： 大数据 文章标签： Kettle 列拆分为多行 列转行 行转列
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zhengzaifeidelushang/article/details/109141426
版权
大数据 专栏收录该内容
532 篇文章 542 订阅 ¥49.90 ¥99.00
订阅专栏
本文详细介绍了如何使用 Kettle 工具进行数据转换，包括列拆分为多行，将列数据转换为行，以及行数据转换为列的操作。在列拆分中，通过设置分隔符将Excel中的成绩字段拆分为多行；列转行则是按姓名分组，将subject和grade字段转换为行；行转列则将语文、数学等科目名作为新列，成绩作为对应列的数据，实现了数据的行列转换。
摘要由CSDN通过智能技术生成

Kettle 列拆分为多行、列转行、行转列

一、Kettle 列拆分为多行

列拆分为多行就是把指定分隔符的字段进行拆分为多行。

从excel读取数据，把成绩列拆分为多行，并保存在excel中。
在这里插入图片描述
列拆分为多行设置如下：
在这里插入图片描述
源数据如下：
在这里插入图片描述
经过列拆分为多行后数据如下：
在这里插入图片描述

二、列转行

kettle中的列传行组件可以理解为SQL中的行转列。

了解本专栏 订阅专栏 解锁全文
快乐骑行^_^
关注
  • 0
    点赞
  • 踩
  • 5
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
订阅专栏
Kettle列拆分多行
07-16
Kettle列拆分多行，例如传入 '1,2,3,4'逗号分隔的参数，转换成多行数据
kettle开发篇-列拆分为多行-Day14
qq_29061315的博客
12-12 1142
前言： 在前一节，我们学习了拆分字段，即将一个字段的值拆分为多个字段值进行存储，相当于我们从一列字段拆分为多列了，如本来是一个数据列的name通过我们的拆分，拆分为firstname和lastname两列，但原来的name列不在数据流之中了。今天我们来学习一个相对应的操作怎么将一行数据拆分为多行。 一、列拆分为多行 列拆分为多行就是把指定分隔符的字段进行拆分为多行。 实例，如我们将一个信...
KETTLE中的列拆分为多行
AnameJL的博客
11-24 2362
KETTLE中的列拆分为多行 这里的”列拆分为多行”其实和hive中的炸裂函数”explode”是差不多的，都是列转行的操作，使用起来还是很简单的。 将’列拆分为多行’模块拖入到转换界面当中，双击进入’列拆分为多行’的参数配置窗口，如下图所示 进行参数的配置，在”要拆分的字段”选择自己所要操作的字段，在”分隔符”填入想要按照什么分隔符进行拆分，在”新字段名”中填入新生成列的字段名。 到这里参数的配置就完成了，点击确认就可以了。 运行转换，对比数据结果，图一为原字段和字段内容，图二为拆分后的字段和字段内容
Kettle自定义插件（动态数据行列转换）——（一）
最新发布
东天里的冬天
07-11 773
最近在做项目的过程中，有个功能需求是将多行数据进行聚合最终转化成一行数据，但是在转化的过程中随着数据的增加，需要动态的新增这一行的字段数据，之所以这样做是为了迎合已有业务需要，在此不必过于纠结方案。本篇主要从代码开发的角度，教会新手如何去开发一款自定义的kettle插件，本篇亦可以理解为是上篇文章的实战。
kettle开发篇-列转行-Day15
qq_29061315的博客
12-13 3363
前言： 前面我们讲到了将一个字段拆分为多个字段，知道我们字段的横向分裂，从一个字段分为两个字段。学习了列拆分为多行，知道了怎么将一行的值拆分为多行，今天我们来学习一个列的高级操作，列传行，对于初学者来说，列传行也是一个比较高级的操作了，下面我们来看看列转行的语法和使用场景吧。 一、列转行 列转行就是如果数据一列有相同的值，按照指定的止损，把多行数据转换为一行数据。列转行以后会增加许多新的列，...
数据处理之拆分字段成多行或者行拆分成多列
rphyllis的博客
10-18 632
拆分字段成多行或者行拆分为多列·
kettle 行列互转、列拆分为多行、获取文件名等控件使用
07-19
行列互转、列拆分为多行、获取文件名（通配符获取多个路径下的文本文件输入到输出） 行列互转、列拆分为多行、获取文件名（通配符获取多个路径下的文本文件输入到输出） 行列互转、列拆分为多行、获取文件名...
kettle行转列详解
10-11
在数据处理过程中，有时我们需要将数据从行格式转换为列格式，或者反之，这被称为“行转列”或“列转行”。在Kettle中实现这一功能，可以通过“Row to Column”或“Column to Row”步骤来完成。 在本文中，我们将...
多行数据转换为一行数据
01-09
此工具可以方便开发人员，把多行数据转换为一行数据，操作简单，快捷
python+kettle拆分地址
08-31
通过这种方式，Python和Kettle结合，可以有效地处理大规模的地址数据，将非结构化的地址信息转化为结构化的地理位置数据，这对于数据分析、地理信息系统（GIS）应用或者其他基于位置的服务来说非常有用。在实际操作...
KETTLE 列转行
Yuyuyu666dhdh的博客
09-19 1426
将EXCEL表数据列转行后插入到本地数据库中
Kettle6列拆分为多行步骤详解
热门推荐
Eric_Hxy的专栏
10-30 1万+
1.        前言 本文将对Kettle6中常用步骤列拆分为多行（英文原名：Split Field to Rows）。也就是说，将输入数据行集中的某个列按照条件拆分为多行。这种条件可以是简单的一个分隔符，也可以指定正则表达式。   2.        说明 步骤的属性对话框如下图所示： 下面通过一个表格逐项解释每一个对话框中字段的含义。 序号
ETL工具kettle的列转行组件
像豆芽一样优秀
09-25 5677
一、 示例脚本： # 创建表 create table score( id bigint(20) auto_increment, sname varchar(255) comment "学生姓名", cname varchar(255) comment "课程名称", score int(11) comment "分数", primary key(id) )engine=innodb; # 插入数据 insert into score values(1,"小孙","mysql",55); ins
kettle开发篇-行转列-Day16
qq_29061315的博客
12-14 1822
前言： 在前面我们讲到了拆分字段、去除重复记录、获取哈希值、列转行等，都是针对EXCEL的数据的操作，在昨天写完列转行时，有人提问到，能不能两级反转，来说说行转列。好的，今天我们就来详细说明下行转列的操作，我们还是应用昨天的数据，但是将EXCEL输出变成今天的输入，通过行转列完成两级反转。 一、行转列 如图所示，行转列就是把数据字段的字段名转换为一列，把数据行变成数据列。即我们将昨天输出的张...
Kettle用多个列拆分来处理数据
txinfo的专栏
07-23 7095
在导入客户数据时，遇上了一个问题 原始数据如下： 机组编码 用户 岗位 JY01 罗启先、杭朝文 机长、车间副主任 JY02 张后伟 机长 JY03 张开林、王松 机长、副手 其中用户和岗位是一一对应的，希望转换后得到以下内容 机组编码 用户 岗位 JY01 罗启先 机长 JY01 杭朝文 ...
kettle开发篇-拆分字段-Day13
qq_29061315的博客
12-11 1385
前言： 前面我们有讲到合并字段，将firstname和lastname合并为姓名，今天我们来讲解怎么将一个字段拆分为多个字段，怎么将一列数据转换为多行。拆分字段的用处比如前面提到的获取firstname 和 lastname，也可用于从批次号中获取型号等。如约翰-詹姆斯，我们按照“-”进行拆分就得到我们想要的约翰、詹姆斯了。同样的在批次号WZ20221211HZN502我们通过“”拆分后就获得了...
kettle案例23-拆分字段
勇气与行动
11-08 4471
在工作中经常将数据导出并备份到文件中，这时文件的数据由于没有数据库系统的规范字段格式管理，数据显得很乱，也很不方便管理。 为了方便浏览日志内容，需要在某软件系统的操作日志“系统操作日志.xls”文件中，采用拆分字段组件，从日志内容中拆分出用户ID、操作时间、操作内容和IP地址字段，并对应到相关的数据。 参数设置： 参数名称 说明 基础参数 步骤名称 表示拆分字段组件名称，在..
kettle列转行（行扁平化）的使用
qq_44381427的博客
06-07 397
kettle行扁平化节点是将多行数据合并为一行数据如，其行为类似于css中的float排列。需要注意数据需要按照name category排序，并且中间不能有缺失的数据。使用行扁平化节点配置需要扁平化的字段，扁平化后转为多少字段。将上表格数据转换为下表格数据。上表数据需要补上两条数据。
Kettle拆分时间段循环进行导入数据
qq_37400096的博客
10-11 1389
kettle循环抽取数据实战
kettle中的列转行
05-25
Kettle中的列转行是一种数据转换的方式，它将一列数据中的多个属性值拆分成多行，并将这些属性值分别作为新行的一个字段存储。例如，一张表中有一列包含了多个属性值，如姓名、电话、地址等，通过列转行的操作，可以将这些属性值拆分成多行，每行只包含一个属性值，并将姓名、电话、地址等作为新行的字段存储。 Kettle中实现列转行操作的方式是使用“转换”（Transformation）中的“行扩展”（Row Expansion）步骤。在这个步骤中，需要指定要进行列转行操作的列，并指定新行的字段名和数据类型。此外，还可以通过“选项”（Options）来设置是否要去重、是否要保留原始列等。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

快乐骑行^_^

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值