自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(10)
  • 收藏
  • 关注

原创 8.3.7-8.3.8

8.3.7 加载演员数据至演员维度表大数据一班 19162901441、打开Kettle工具,创建转换使用Kettle工具,创建一个转换load_dim_actor,并添加表输入控件、插入/更新控件以及Hop跳线,具体如图所示。2、配置表输入控件3、配置表输入2控件4、配置插入/更新控件5、运行转换load_dim_actor6、运行转换load_dim_actor6、查看数据表dim_actor中的数据8.3.8 加载电影数据至电影维度表大数据一班 1

2021-11-15 17:32:42 1760

原创 8.3.9-8.3.10

8.3.8 加载电影数据至电影维度表大数据一班 19162901441、打开Kettle 工具,创建转换使用Kettle工具,创建一个转换load_dim_film,并添加表输入控件、数据库查询控件、值映射控件、列拆分为多行控件、增加常量控件、列转换控件、计算器控件、数据库连接控件、联合查询/更新控件、分组控件、流查询控件、插入/更新控件以及Hop跳线连接,如下图,2、配置表输入控件3、配置表输入2控件4、配置数据库查询控件5、配置数据库查询2控件6、配置值

2021-11-15 16:36:47 614

原创 8.3.5-8.3.6

8.3.5 加载用户数据至用户维度表1916290144 大数据一班1、使用Kettle工具,创建一个转换load_dim_customer,并添加表输入控件、映射控件、字段选择控件、值映射控件、维度查询/更新控件以及Hop跳连接线,如下:2、配置表输入控件3、配置表输入2控件4、打开Kettle工具,创建一个转换fetch_address(该转换为转换load_dim_customer的子转换),并添加映射输入规范控件、数据库查询控件、过滤记录控件、JavaScript代码控件、字段选择

2021-11-08 18:05:02 1837

原创 8.3.2-8.3.3-8.3.4

8.3.2加载日期数据至日期维度表1、打开kettle工具,创建转换使用Kettle工具创建转换load_dim_date,并添加“生成记录”控件,“增加序列”控件、“JavaScript代码”控件、“表输出”控件以及Hop跳线连接线,如下:2、配置“生成记录”控件3、配置“增加序列”控件4、配置”JavaScript代码“控件5、配置“表输出”控件6、运行转换load_dim_date7、查看维度表dim_date中的数据8.3.2加载时间数据至时间维度表1、打开Kett

2021-11-04 15:07:42 1053

原创 第七章课后题

第七章课后题**大数据一班1916290144**一、数据全量加载1.打开Kettle工具创建转换full_load,并添加“执行SQL脚本“控件、”表输入“控件、“表输出”控件以及Hop跳线连接,如下:2、配置“执行SQL脚本”控件3、配置“表输入”控件4、配置“表输出”控件5、运行转换full_load6、查看full_target中数据已成功被加载二、数据增量加载1、.打开Kettle工具创建转换incremental_load,并添加”表输入“控件、“插入/更

2021-11-03 13:06:57 1010

原创 2021-10-20 第六章课后题

19大数据一班 1916290144第六章 课后习题(1)打开Kettle工具,新建转换使用Kettle工具,创建一个转换generalization,并添加文本文件输入控件、表输入控件、字段选择控件、排序记录控件、记录集连接控件、表输出控件以及Hop跳连接线,如下图:(2)配置文本文件输入控件(3)配置字段选择控件(4)配置排序记录控件(5)配置表输入控件(6)配置排序记录2控件(7)配置记录集连接控件(8)配置字段选择2控件(9)配置排序记录3控件(10)配

2021-10-20 14:05:57 111

原创 2021-10-15

第五章课后题大数据一班 1916290144一、对文件merge.csv进行完全去重1、csv文件输入2、唯一行 (哈希值)3、运行转换二、对文件people_survey.txt中的缺失值进行填充1、文本文件输入2、过滤记录3、替换NULL值4、合并记录5、替换NULL值26、字段选择7、运行结果...

2021-10-15 19:24:17 69

原创 2021-10-07 第四章课后习题

大数据一班 1916290144一、csv文件的抽取csv文件输入控件和表输出控件的配置如下图在数据库extract中创建表csv,如下图所示运行结果成功,如下图所示在数据库中查看数据被成功提取,如下图所示二、JSON文件的数据抽取JSON Input控件配置如下图JSON Input2 控件配置如下图表输出控件配置如下图提前建立表json如下图运行后结果如下图在数据库表json中查看数据成功提取,如下图...

2021-10-07 13:34:04 75

原创 2021-09-16 转换和作业例子

转换和作业例子1、一个简单的转换例子2、一个简单地作业例子

2021-09-16 12:20:33 90

原创 2021-09-09 数据清洗笔记第一章

第一章 数据清洗概述

2021-09-09 18:32:58 691

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除