kettle 多对多进行字段匹配

本文介绍了如何使用Kettle进行多对多字段匹配,解决从原始表向正式表增量抽取数据的问题。首先,通过判断原始库ID是否在正式库中排除已存在数据,接着将未出现在正式库的ID及其关联名称与权限表进行匹配,将符合条件的数据存入中间表。此外,还分享了全量数据的概念作为补充。
摘要由CSDN通过智能技术生成

今天遇到个棘手的问题,需求是从原始表向正式表增量抽取数据,其中涵盖向中间表插入数据的操作。

1、首先判断原始库中id不在正式库中的id

2、找到不在正式库中的id、名称 并与 权限表 名称相同的权限名称、编码一起存入中间表

下面发一下我的解决方式:(第一次用,不是很成熟,请大家指正)

下面看一下 第一个问题的详细解决方法

 这样id就找到了,下面找到权限名称与项目名称相同的权限信息插入中间表。

 

最后普及个小知识

全量的意思 (A、B,A、BB,A、BBB;C、B,C、BB,C、BBB) 表1(A,C),表2(B,BB,BBB)

写的不好,希望能帮到大家。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值