一.利用kettle工具对数据进行颗粒度的转换
1.首先新建如图所示的转换:
2,然后我们开始配置文本文件输入控件,首先将要处理的数据添加指定位置:
然后插入制表符,取消勾选头部复选框:
然后配置字段选项卡:
3.然后配置字段选择选项卡:
4.配置排序记录控件:
5.配置表输入控件:
6.配置排序记录2控件:
7.配置记录集连接控件:
8.配置字段选择2控件:
9.配置排序记录3控件:
10.配置表输入2控件:
11.配置排序记录4控件:
12.配置记录集连接2控件:
13.配置字段选择3控件:
14.配置表输出控件:
接下来选择要输出的数据表:
15.新建如图所示的转换:
16.配置表输入控件:
17.配置字段选择控件:
18.配置排序记录控件:
19.配置文本文件输入控件:
20.配置字段选择2控件:
21.配置排序记录2控件:
22.配置记录集连接控件:
23.配置字段选择3控件:
24.配置文本文件输出控件:
25.新建如图所示作业:
26.配置转换控件:
配置转换2控件:
27.当我们执行该作业之后,发现已经统一改成了省份:
二.对personnel_data_new.txt中的数据进行商务规则计算
1 .首先我们新建如图所示的转换:
2.然后配置文本文件输入控件,添加相应文件,然后插入制表符:
之后添加字段:
3.配置增加常量控件:
4.配置计算器控件:
5.配置文本文件输出控件,插入制表符:
然后添加字段:
6.运行结果:
7,查看文本文件,已经达到结果: