合并记录控件介绍
该步骤用于将两个不同来源的数据合并,这两个来源的数据分别为旧数据和新数据,该步骤将旧数据和新数据按照指定的关键字匹配、比较、合并。
需要设置的参数:
旧数据来源:旧数据来源的步骤(目标表)
新数据来源:新数据来源的步骤(源表)
标志字段:设置标志字段的名称,标志字段用于保存比较的结果,比较结果有下列几种。
1. “identical” – 旧数据和新数据一样
2. “changed” – 数据发生了变化;
3. “new” – 新数据中有而旧数据中没有的记录
4. “deleted” –旧数据中有而新数据中没有的记录
关键字段:用于定位两个数据源中的同一条记录。
比较字段:对于两个数据源中的同一条记录中,指定需要比较的字段。
合并后的数据将包括旧数据来源和新数据来源里的所有数据,对于变化的数据,使用新数据代替旧数据,同时在结果里用一个标示字段,来指定新旧数据的比较结果。
注意:
旧数据和新数据需要事先按照关键字段排序,升序。
旧数据和新数据要有相同的字段名称。
例子:
旧数据:
field1, field2
1, 1
2, 2
3, 3
4, 4
新数据
field1, field2
1, 1
2, 9
5, 5
设置:标志字段是flag,关键字段是 field1, 比较字段是field2
合并后的数据
field1; field2; flag
1; 1; identical
2; 9; changed
3; 3; deleted
4; 4; deleted
5; 5; new
kettle配置实例
![bf894b9379c34fdaebd64d044fe9ac4c.png](https://i-blog.csdnimg.cn/blog_migrate/a2ee213120605fb77e80f871892accc1.jpeg)
- 1.表输入-源表输入
![76315dce3a0468ea72f2c42cdb763e80.png](https://i-blog.csdnimg.cn/blog_migrate/2c8bf24eeeb1b23e942f5a4fb7bab7ae.jpeg)
- 2.表输入-目标表输入
![d7ac939c67a5a811ab52cdd254a5a98c.png](https://i-blog.csdnimg.cn/blog_migrate/8965e544ec465369323d0d59d60ff4c1.jpeg)
- 3.合并记录
![b74640b03b1b119702c7cd3fe5a94b3d.png](https://i-blog.csdnimg.cn/blog_migrate/ed93560d20de4c070991b46bbec5d049.jpeg)
- 4.数据同步-1
![5923d9be72093e008a7e41bf8b7b102e.png](https://i-blog.csdnimg.cn/blog_migrate/d587997c52975da67eab7d0d62d7d044.jpeg)
- 4.数据同步-2
![a146cbcc201f2ceb3ebda80c5d7d451c.png](https://i-blog.csdnimg.cn/blog_migrate/9bfd5ecc2efaf5ff70ac1f5da33bca60.jpeg)
--------------------------------------------------------------------------------------
教程
结束
感谢
观看
----------------------------------------------------------------------------------------