ETL案例作业
聖天乐
这个作者很懒,什么都没留下…
展开
-
案例8.3.10 加载数据库sakila中的数据至数据仓库sakila_dw
案例8.3.10 加载数据库sakila中的数据至数据仓库sakila_dw原创 2022-11-28 10:32:42 · 363 阅读 · 1 评论 -
案例8.3.9 加载租赁数据至租赁事实表
案例8.3.9 加载租赁数据至租赁事实表原创 2022-11-27 19:52:24 · 245 阅读 · 0 评论 -
案例8.3.8 加载电影数据至电影维度表
案例8.3.8 加载电影数据至电影维度表原创 2022-11-27 19:45:13 · 169 阅读 · 0 评论 -
案例8.3.7 加载演员数据至演员维度表
案例8.3.7 加载演员数据至演员维度表原创 2022-11-27 19:35:20 · 93 阅读 · 0 评论 -
案例8.3.6 加载商店数据至商店维度表
案例8.3.6 加载商店数据至商店维度表原创 2022-11-27 19:32:24 · 137 阅读 · 0 评论 -
案例8.3.5 加载用户数据至用户维度表
案例8.3.5 加载用户数据至用户维度表原创 2022-11-27 19:28:36 · 268 阅读 · 0 评论 -
案例8.3.4 加载员工数据至员工维度表
8.查看结果。原创 2022-11-27 19:21:40 · 44 阅读 · 0 评论 -
案例8.3.3 加载时间数据至时间维度表
案例8.3.3 加载时间数据至时间维度表原创 2022-11-27 18:47:08 · 141 阅读 · 0 评论 -
案例8.3.2 加载日期数据至日期维度表
案例8.3.2 加载日期数据至日期维度表原创 2022-11-27 18:39:29 · 250 阅读 · 0 评论 -
案例7.2 数据的批量加载
查看数据表weibo_user中的数据。原创 2022-11-27 18:32:24 · 56 阅读 · 0 评论 -
案例7.1.2 增量加载
案例7.1.2 增量加载原创 2022-11-27 18:28:00 · 51 阅读 · 0 评论 -
案例7.1.1 全量加载
1.创建转换2.配置执行SQL脚本 3.配置表输入 4.配置表输出 5.运行转换,查看结果原创 2022-11-26 17:56:21 · 54 阅读 · 0 评论 -
6.4数据的商务规则计算
1.打开Kettle工具,创建转换 2.配置表输入控件 3.配置唯一行(哈希值)2控件 4.配置字段选择控件 5.配置计算器控件 6.配置排序记录控件 7.配置分组控件 8.配置字段选择2控件 9.配置唯一行控件 10.配置表输出控件 11.运行转换12.查看数据表regional_sales中的数据原创 2022-11-26 17:16:15 · 40 阅读 · 0 评论 -
6.3数据粒度的转换
1.打开Kettle工具,创建转换 2.配置表输入控件 3.配置字段选择控件 4.配置排序记录控件 5.配置表输入2控件 6.配置排序记录2控件 7.配置记录集连接控件 8.配置字段选择2控件 9.配置排序记录3控件 10.配置表输入3控件 11.配置排序记录4控件 12.配置记录集连接2控件 13.配置过滤记录控件 14.配置字段选择3控件 15. 配置字段选择4控件 16.配置表输出控件 17.配置表输出2控件 18.打开Kettle工具,新建转换 19.配置表输入控件 2原创 2022-11-26 17:11:03 · 48 阅读 · 0 评论 -
6.2不一致数据转换
1.2.3.6.7.8.原创 2022-11-26 16:56:53 · 43 阅读 · 0 评论 -
案例5.4.2 数据规范化处理
1.创建转换2.配置自定义常量数据 3.配置计算器 4.配置数据检验 5.运行转换原创 2022-11-18 07:57:10 · 80 阅读 · 0 评论 -
案例5.4.1 数据一致性处理
1.打开Kettle工具,创建转换 2.配置表输入 3.配置值映射4.配置插入/更新5.运行转换6.查看数据表 7.创建作业8. 配置Start9.配置转换10.运行作业原创 2022-11-18 07:56:58 · 47 阅读 · 0 评论 -
案例5.3.2 修补异常值
1.打开Kettle工具,创建转换 2.配置表输入 3.配置过滤记录 4.配置设置值为NULL 5.配置合并记录 6.配置替换NULL值 7.配置字段选择 8.运行转换原创 2022-11-18 07:56:43 · 59 阅读 · 0 评论 -
案例5.3.1 删除包含异常值的记录
案例5.3.1 删除包含异常值的记录原创 2022-11-18 07:56:28 · 60 阅读 · 0 评论 -
案例5.2.2 填充缺失值
1.打开Kettle工具,创建转换2.配置文本文件输入 3.配置过滤记录4.配置替换NULL值 5.配置合并记录 6.配置替换NULL值2 7.配置字段选择 8.运行转换 9.查看结果原创 2022-11-18 07:56:08 · 107 阅读 · 0 评论 -
案例5.2.1 去除缺失值
案例5.2.1 去除缺失值原创 2022-11-18 07:55:48 · 52 阅读 · 0 评论 -
案例5.1.2 不完全去重
1.数据准备 2.打开Kettle工具,创建转换3.配置文本文件输入4.配置唯一行(哈希值)5.运行转换原创 2022-11-17 20:25:45 · 51 阅读 · 0 评论 -
案例5.1.1 完全去重
案例5.1.1 完全去重原创 2022-11-17 20:18:04 · 44 阅读 · 0 评论 -
案例4.3.2 抽取非关系型数据库的数据
1.打开Kettle工具,创建转换 2.配置MongoDB input 3.配置JSON input 4.运行转换 5.查看数据原创 2022-11-17 20:10:46 · 188 阅读 · 0 评论 -
案例4.3.1 抽取关系型数据库的数据
1.打开Kettle工具,创建转换 2.配置表输入 3.配置表输出4.运行转换 5.查看数据原创 2022-11-17 19:58:53 · 120 阅读 · 0 评论 -
案例4.2.3 JSON文件的数据抽取
1.打开Kettle工具,创建转换2.配置JSON input 3.配置表输出 4.运行转换 5.查看数据原创 2022-11-17 19:48:56 · 86 阅读 · 0 评论 -
4.2.2 XML文件的数据抽取
1.打开Kettle工具,创建转换 2.配置Get data from XML 3.配置表输出4.运行转换 5.查看数据原创 2022-11-17 18:37:56 · 47 阅读 · 0 评论 -
案例4.2.1 HTML网页的数据抽取
案例4.2.1 HTML网页的数据抽取。原创 2022-11-17 18:31:41 · 82 阅读 · 0 评论 -
案例 4.1.2 CSV文件的抽取
1.打开Kettle工具,创建转换2.配置CSV文件输入 3.配置表输出 4.运行转换5.查看数据表csv原创 2022-11-17 18:14:34 · 51 阅读 · 0 评论 -
案例4.1.1 TSV文件抽取
1.打开Kettle工具,创建转换 2.配置文本文件输入 3.配置表输出 4.运行转换 5.查看数据表原创 2022-11-17 18:04:46 · 67 阅读 · 0 评论 -
案例3.4.2 作业管理
1.打开Kettle工具,创建作业 2.配置Start 3.配置发送邮件 4.运行结果 5.查看邮箱原创 2022-11-17 17:47:08 · 46 阅读 · 0 评论 -
案例3.4.1 转换管理
通过Kettle工具的转换来实现将一张数据表中的两个字段进行拼接,然后插入到另一张数据表中。即将数据表personal_a中的字段surname和name进行拼接,然后插入到数据表personal_b。原创 2022-11-09 21:47:03 · 110 阅读 · 1 评论