Kettle用多个列拆分来处理数据

最新推荐文章于 2024-05-27 14:30:33 发布

txinfo

最新推荐文章于 2024-05-27 14:30:33 发布

阅读量7k

点赞数 2

分类专栏： kettle 文章标签： kettle etl 列拆分序列

本文链接：https://blog.csdn.net/txinfo/article/details/81176547

版权

1 篇文章 0 订阅

订阅专栏

在导入客户数据时，遇上了一个问题

原始数据如下：

其中用户和岗位是一一对应的，希望转换后得到以下内容

用kettle里的列拆分为多行组件是可以把数据拆成多行的，但现在是有两列需要拆成多行，再重新拼接，所以考虑先单独做拆分，再用记录集连接控件进行连接，但发现这么直接拆分后再连接的后果，就是会多出许多数据，比如变成

因此，考虑引入序列组件，就是先分拆成以下两个表格

这样在连接时候，用机组编码+序号的方式就可以正常拼接出数据了

最终的kettle流程图如下：

其中自定义常量数据如下：

列拆分的属性

增加序列属性

注意，由于kettle里的序列是全局的，在这里计数器名称必须起一个值，而另一个序列的计数器名称起另一个值，否则序列号在第一个处理完后，第二个序列号的起始序列号就不是从1开始了

记录值合并属性如下：

最终的输出结果，如果用输出文本，则是这种格式

至此搞定

不知道还有没有其它的好方法，希望有更好的意见

关注

专栏目录