- 博客(10)
- 收藏
- 关注
RSS订阅原创 ETL——8.3.7、8.3.8例子
一、8.3.71.创建转换2.配置表输入控件3.配置插入更新4.运行结果二、8.3.81.创建转换2. 配置表输入3.配置数据库查询控件4. 配置值映射5.配置列拆分多行控件6.配置 增加常量控件7.配置列转行控件8.配置计算器控件9.配置数据库链接控件10.配置 数据库查询控件11.配置增加常量控件12.配置列转行13. ...
2021-11-20 21:09:05
550
原创 综合实例2之数据清洗
一、加载用户数据至用户维度表1.打开kettle，创建转换2.配置表输入控件3.配置表输入2控件4.子转换：打开kettle，新建转换5.配置映射输入规范控件6.配置数据库查询控件7.配置数据库查询2控件8.配置数据库查询3控件9.配置过滤记录控件10.配置JavaScript代码控件11.配置字段选择控件（完成子转换的配置）12.配置映射控件13.配置字段选择控件...
2021-11-20 20:21:01
435
原创 数据仓库案例
一、加载日期数据至日期维度表1.打开kettle工具，创建转换。2.配置生成记录控件3.配置增加序列控件4.配置Javascript代码控件5.配置表输出控件6.运行转换7.查看数据表dim_date中的数据二、加载时间数据至时间维度表1.打开kettle工具，创建转换2. 配置生成记录控件3.配置增加序列控件4.配置JavaScrip代码t控件5、配置生成记录2控件6...
2021-11-10 20:40:23
775
原创 kettle工具实现数据清洗
一、Excel输入2.设置参数3.查看被选中的文件名称。单击【显示文件名称…】按钮，弹出【文件读取】对话框，查看被选中读取的文件，如图所示。4.设置工作表5.【字段】选项卡参数6. 预览记录二、生成记录1.加入控件3.预览记录三、生成随机数1.加入控件2.配置控件3.预览记录四、获取系统信息1.加入控件2.配置控件3.预览记录五、排序记录1.建...
2021-11-04 20:43:29
915
原创 第六章作业
（1）打开Kettle工具，新建转换使用Kettle工具，创建一个转换generalization。2.配置文本文件输入控件4.配置排序记录控件12.配置字段选择3控件13.配置表输出控件14.打开Kettle工具，新建转换，使用Kettle工具，创建一个转换generalization_merge。15.配置表输入控件16.配置字段选择控件17.配置排序...
2021-11-03 20:26:45
158
原创 清洗数据 第四章作业
（1）抽取CSV文件csv_extract.csv中的数据保存至数据库extract中的数据表csv中。（2）抽取JSON文件json_extract.js中的数据保存至数据库extract中的数据表json中。
2021-10-08 21:30:31
111
原创 第一章 数据清洗概述
1.1数据清洗的背景 数据质量是指在业务环境下，数据符合数据消费者的目的，能满足业务场景具体需求的程度。从适用性的角度看，数据质量是一个相对的概念（与决策有关）。 数据质量的特点： 1、“业务需求”会随时间变化，数据质量也会随时间变化。2、数据质量可以借助信息系统度量，但独立于信息系统存在。 3、数据质量存在于数据的整个生命周期，随数据的产生而产生，随数据的消失而消失。1.1.2数据质量的评价指标...
2021-09-10 19:54:57
916
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人