- 博客(23)
- 收藏
- 关注
原创 第八章 加载日期数据至日期维度表
构建DVD租赁商店数据仓库。使用Kettle工具实现抽取数据库sakila中的数据,转换成符合DVD租赁业务的数据,并加载到DVD租赁商店数据仓库sakila_dw中。
2022-11-26 12:06:58
645
1
原创 第七章 增量加载
增量加载是指目标表仅加载源数据表中新增和发生变化的数据。优秀的增量加载机制不但能够将业务系统中的变化数据按一定的频率准确地捕获到并加载到目标表中,同时还不会对业务系统造成太大的压力,也不会影响现有业务。通过Kettle工具将数据表中的数据增量加载到数据表中。
2022-11-25 21:49:53
198
原创 第七章 全量加载
从技术角度来说,全量加载比增量加载的操作要简单很多,即只需要在数据加载之前,将目标数据表进行清空,再将源数据表中的数据全部加载到目标表中。通过Kettle工具将数据表中的数据全量加载到数据表中。
2022-11-25 21:31:06
134
原创 第六章 数据的商务规则计算
通过Kettle工具对数据表中的数据进行商务规则的计算,即对数据表中的数据进行相关处理和计算,从而得出手机在各省份的日销售额,并存储于数据表中。
2022-11-25 20:40:29
66
原创 第六章 数据粒度的转换
通过Kettle工具将对数据表company进行数据粒度的转换操作,即将数据表company中字段为salesArea的数据都统一成省级份,并存储到新数据表中。
2022-11-25 20:16:04
123
原创 第六章 不一致数据转换
通过Kettle工具将对数据表company进行不一致数据的转换操作,即通过与供货商提供的标准价格表进行比较,得出不一致数据,从而进行修改,最终输出到数据表company中。
2022-11-25 19:19:02
57
原创 第六章 多数据源的合并
通过Kettle工具将A公司和B公司的手机日销售数据合并到一个数据源(数据表company)中,也就是对文件和数据表company_b中的数据进行合并操作,并输出到数据表company中。
2022-11-25 18:12:17
185
原创 第五章 数据一致性处理
通过Kettle工具,使用弱一致性对数据表中的数据进行一致性处理,即利用数据表中的字段GENDER中的值训练出一个健康值预测模型,用于将原始数据中的字符串特征转化为模型可识别的数字特征。
2022-11-24 20:50:49
442
原创 第三章 转换管理案例
通过Kettle工具的转换来实现将一张数据表中的两个字段进行拼接,然后插入到另一张数据表中。即将数据表personal_a中的字段surname和name进行拼接,然后插入到数据表personal_b。
2022-11-01 18:05:43
112
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人