kettle —— 字段剪裁，数据去重，js转换

Kettle学习三：字段的剪裁，数据去重，以及JS的过滤处理，将结果记录到日志中

1.建立如下结构的视图：

表输入依旧采用test连接下的test1表，数据如下

注意：当数据库表中字段更改时，我们生成的sql字段可能出错，解决办法是：手动修改字段名或使用*代替字段名

2.先将性别字段剪裁出来

双击String cut设置需要剪切的字段名，剪切的值长度(这里剪切2个长度的name)

3.设置去重的字段

注意，去重这里要求对要去重的字段进行排序，否则他不知道将覆盖第一条之后的重复记录。故我们在表输入时，对name排序。

4.设置js字段，这里我们添加一个js字段xx，其值为age+id

5.设置日志输出

6.结果显示(这里可以看到，只有4行记录，表中最后的重复行被去掉了)