ETL作业

最新推荐文章于 2024-04-26 11:36:07 发布

一只小白狼

最新推荐文章于 2024-04-26 11:36:07 发布

阅读量359

点赞数

文章标签： etl 数据仓库

版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文链接：https://blog.csdn.net/m0_63762650/article/details/127855249

版权

第三章 kettle工具的基本使用

1.简单转换

在这里插入图片描述

2.简单作业

在这里插入图片描述

3.转换管理

拉入控件
在这里插入图片描述

4.通过kattle工具的作业来实现发送文件

在这里插入图片描述

第四章数据抽取

1.tsv文件的抽取

在这里插入图片描述

2.csv文件抽取

在这里插入图片描述

2.html文件抽取

在这里插入图片描述

4.xml的抽取

在这里插入图片描述

5.json抽取

在这里插入图片描述

第五章数据的清洗与校验

1.数据去重——完全去重

在这里插入图片描述数据前后对比

2.数据去重——不完全去重

在这里插入图片描述数据前后对比

3.去除缺失值

在这里插入图片描述
前后数据对比

4.填充缺失值

在这里插入图片描述前后数据对比

5.删除异常值

在这里插入图片描述
数据前后对比

6.修补异常值

在这里插入图片描述

7.数据一致性

在这里插入图片描述

前后数据对比

8.一致性检验

在这里插入图片描述

9.数据检验

在这里插入图片描述

第六章数据转化

1.多数据源合并

在这里插入图片描述

2.不一致数据的转换

在这里插入图片描述

第七章数据加载

1.全量加载

前后数据对比

![在这里插入图片描述](https://img-blog.csdnimg.cn/ca43f5f5c6534ccaa95cbb474fd1411e.png

在这里插入图片描述

2.增量加载

在这里插入图片描述

3.批量加载

在这里插入图片描述

第八章综合案例——构建DVD租赁商店数据仓库

1.加载日期数据到日期维度表

在这里插入图片描述

2.加载时间数据到时间维度表

在这里插入图片描述

一只小白狼

关注

0
点赞
踩
1

收藏

觉得还不错? 一键收藏
0
评论
ETL作业

ETL数据清洗实操
复制链接

扫一扫

评论

被折叠的条评论为什么被折叠?

到【灌水乐园】发言

查看更多评论

添加红包

成就一亿技术人!

hope_wisdom

发出的红包

实付元

使用余额支付

点击重新获取

扫码支付

钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。