《数据清洗》黑马程序员著综合案例【8.3.7--8.3.8】

最新推荐文章于 2023-04-28 00:18:37 发布
最新推荐文章于 2023-04-28 00:18:37 发布
阅读量416 收藏
点赞数
文章标签： 数据库 大数据 dba
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_48459732/article/details/121446212
版权

文章目录

一、加载演员数据至演员维度表

操作介绍

通过Kettle工具加载演员数据至演员维度表dim_actor。

案例实现

1、打开kettle工具，创建转换
使用Kettle工具，创建一个转换load_dim_actor，并添加表输入控件、插入/更新控件以及Hop跳连接线，具体如图所示。
在这里插入图片描述
2、双击“表输入”控件，进入“表输入”配置界面，单击【新建】按钮，配置数据库连接，配置完成后单击【确认】按钮。MySQL数据库连接的配置，如图所示。
在这里插入图片描述
在SQL框中编写SQL语句，用于获取字段actor_last_update中的最大值，将该值替换为”1970-01-01 00:00:00”并赋值给临时字段max_dim_actor_last_update；单击“预览”按钮，查看临时字段max_dim_actor_last_update是否将默认值设置为“1970-01-01 00:00:00”，如图所示。
在这里插入图片描述
3、配置表输入2控件
双击“表输入2”控件，进入“表输入”界面，单击【新建】按钮，配置数据库连接，配置完成后单击【确认】按钮。MySQL数据库连接的配置如图所示。
在这里插入图片描述
在SQL框中编写SQL语句，用于获取数据库sakila中数据表actor中的最新数据，如图所示。
在这里插入图片描述
4、配置插入/更新控件
双击“插入/更新”控件，进入“插入/更新”界面，配置数据库连接。单击目标表右侧的【浏览】按钮，弹出“数据库浏览器”窗口，选择目标表，即维度表dim_actor。单击【获取字段】按钮，用来指定查询数据所需要的关键字，这里选择的是dim_actor数据表中的actor_id字段和输入流里面的actor_id字段；单击【获取和更新字段】按钮，用来指定需要更新的字段，如图所示。
在这里插入图片描述
5、运行转换load_dim_actor
单击转换工作区顶部的运行按钮，运行创建的转换load_dim_actor，实现加载演员数据至演员维度表dim_actor中，如图所示。

6、查看数据表dim_actor中的数据
通过SQLyog工具，查看数据表dim_actor是否已成功插入演员数据，查看结果，如图所示。
在这里插入图片描述

二、加载电影数据至电影维度表

操作介绍

通过kettle工具加载电影数据至电影维度表dim_film

案例实现

1、打开kettle工具，创建转换
使用Kettle工具，创建一个转换load_dim_film，如图所示。
在这里插入图片描述
2、配置表输入控件
双击“表输入”控件，进入“表输入”配置界面，单击【新建】按钮，配置数据库连接，配置完成后单击【确认】按钮。MySQL数据库连接的配置，如图所示。
在这里插入图片描述
在SQL框中编写SQL语句，用于获取字段film_last_update中的最大值，将该值替换为”1970-01-01 00:00:00”并赋值给临时字段max_dim_film_last_update；单击“预览”按钮，查看临时字段max_dim_film_last_update是否将默认值设置为“1970-01-01 00:00:00”，如图所示。
在这里插入图片描述
3、配置表输入2控件
双击“表输入2”控件，进入“表输入”界面，单击【新建】按钮，配置数据库连接，配置完成后单击【确认】按钮。MySQL数据库连接的配置如图所示。
在这里插入图片描述
在SQL框中编写SQL语句，用于获取sakila数据库中film数据表中的最新数据，如图所示。
在这里插入图片描述
4、配置数据库查询控件
单击表名处的【浏览】按钮，添加数据表language，用于查询电影的语言，在“查询所需的关键字”框中，添加查询所需的关键字字段language_id，用于指定表字段和流字段的比较条件；在“查询表返回的值”框中，添加查询表返回的字段name，并重命名为language，如图所示。
在这里插入图片描述
5、配置数据库查询2控件
单击表名处的【浏览】按钮，添加数据表language，用于查询电影原版的语言，在“查询所需的关键字”框中，添加查询所需的关键字字段language_id，用于指定表字段和流字段的比较条件；在“查询表返回的值”框中，添加查询表返回字段name并重命名为original_language，并对于电影原版语言为Null值，则可设置默认值为Not Application，如图所示。
在这里插入图片描述
6、配置值映射控件
双击“值映射”控件，进入“值映射”界面，在“使用的字段名”处的下拉框选择字段rating，指定对电影级别的字段rating进行映射；在“目标字段名”处添加rating_text字段，用于存储目标值；在“字段值”框中，添加源值和目标值，具体如图所示。
在这里插入图片描述
7、配置列拆分为多行控件
双击 “列拆分为多行”控件，进入“列拆分为多行”界面，由于special_features字段表示的是电影的特点，而电影的特点有多个，因此要进行拆分；在“要拆分的字段”处的下拉框选择要拆分的字段special_feature；在“分隔符”处指定分隔符；在“新字段名”框中，添加新的字段名，用于存放利用分隔符分割后得数据，如图所示。
在这里插入图片描述
8、配置增加常量控件
双击“增加常量”控件，进入“增加常量”配置界面，在字段框中添加常量字段Yes和No，并指定值为yes和no，“增加常量”控件的配置，如图所示。
在这里插入图片描述
9、配置列转行控件
双击“列转行”控件，进入“列转行”界面，在“关键字段”处的下拉框中选择关键字段special_feature，由于字段special_feature中包含一个或多个内容，因此需要对字段special_feature进行列转行操作；在“构成分组的字段”框中添加分组字段；在“目标字段框”中添加目标字段，如图所示。
在这里插入图片描述
10、配置计算机控件
双击“计算器”控件，进入“计算器”界面，在“字段”处，添加新字段，用于存储将列转行控件流中的字段special_feature字段的NULL值替换成No的数据，如图所示。
在这里插入图片描述
11、配置数据库连接控件
双击“数据库连接”控件，进入“Database join”界面，配置数据库连接，在SQL框中编写SQL语句，用于根据电影id获取电影的分类；在“The parameters to use”框中，添加编写SQL语句需要的参数，即film_id，计算器控件流中的字段film_id作为参数进行传递，供数据库连接控件使用如图所示。
在这里插入图片描述
12、配置数据库查询3控件
双击“数据库查询3”控件，进入“数据库查询”界面，配置数据库连接。单击表名处的【浏览】按钮，添加数据表category，用于获取电影分类的id；在“查询所需的关键字”框中，添加查询所需的关键字字段category_id，用于指定表字段和流字段的比较条件；在“查询表返回的值”框中，添加查询表返回的值，即name，并重命名为category，如图所示。
在这里插入图片描述
13、配置增加常量2控件
双击“增加常量2”控件，进入“增加常量”界面，在字段框中添加常量字段Yes，由于在“增加常量”控件中设置的常量Yes已经被替换，所以需要添加一个常量，具体如图所示。
在这里插入图片描述
14、配置列转行2控件
双击“列转行2”控件，进入“列转行”界面，在“关键字段”处的下拉框中选择关键字段category，根据电影分类的名称对电影进行分类；在“构成分组的字段”框中添加分组字段，在“目标字段框”中添加目标字段，具体如图所示。
在这里插入图片描述
15、配置计算器2控件
双击“计算器2”控件，进入“计算器”界面，在“字段”处，添加新字段，用于将列转行2控件流中字段category中的NULL值替换成No，如图所示。
在这里插入图片描述
16、配置联合查询/更新控件
双击“联合查询/更新”控件，进入“联合查询/更新”界面，配置数据库连接。单击目标表右侧的【浏览】按钮，选择目标表，即维度表dim_film，用于加载最新的电影维度数据，在“关键字段”框中添加维度字段和流里的字段，并在“代理关键字”框中添加代理关键字段，并指定创建代理键为自增字段，如图所示；
在这里插入图片描述
17、配置数据库连接2控件
双击“数据库连接2”控件，进入“Database join”界面；配置数据库连接。在SQL框中编写SQL语句，用于根据电影id获取演员的id，从而获取演员的基本信息；在“The parameters to use”框中，添加需要的参数，即film_id，如图所示。
在这里插入图片描述
18、配置数据库查询4控件
双击“数据库查询4”控件，进入“数据库查询”界面，配置数据库连接。单击表名处的【浏览】按钮，添加数据表dim_actor，用于获取演员的基本信息；在“查询所需的关键字”框中，添加查询所需的关键字字段actor_id，用于指定表字段和流字段的比较条件；在“查询表返回的值”框中，添加查询表返回的值，如图所示。
在这里插入图片描述
19、配置分组控件
双击“分组”控件，进入“分组”界面，在“构成分组的字段”框中添加分组字段film_key，对“数据库查询4”控件流中的数据按字段film_key进行分组；在“聚合”框中添加聚合字段count_actors，用于统计出演某部电影的演员个数，分组控件的配置如图所示。
在这里插入图片描述
20、配置计算器3控件
双击“计算器3”控件，进入“计算器”界面，在“字段”处，添加新字段one和actor_weighting_factor，其中字段one为自定义的常量，指定值为1，是一个临时值，可移除；字段actor_weighting_factor用于存储演员的权重因子，如图所示。
请添加图片描述
21、配置流查询控件
双击“流查询”控件，进入“流里的值查询”界面，在“Lookup step”处的下拉框选择要查询的流，即计算器3控件流；在“查询值所需的关键字”处，添加用于查询流里值的字段，即film_key，通过使用数据库查询4控件中的字段film_key去计算器3控件流中匹配相应的数据；在“指定用来接收的字段”框中，添加用来接收值的字段actor_weighting_factor，最终输出，流查询控件的配置，如图所示。
在这里插入图片描述
22、配置插入/更新控件
双击“插入/更新”控件，进入“插入/更新”界面，配置数据库连接。单击目标表右侧的【浏览】按钮，弹出“数据库浏览器”窗口，选择目标表，即维度表dim_film_actor_bridge；单击【获取字段】按钮，用来指定查询数据所需要的关键字；单击【获取和更新字段】按钮，用来指定需要更新的字段。插入/更新控件用于通过比较流与表中字段得数据，更新维度表dim_film_actor_bridge表中数据。插入/更新控件的配置如图所示。
在这里插入图片描述
23、配置转换load_dim_film
单击转换工作区顶部的运行按钮，运行创建的转换load_dim_film，实现加载电影数据至电影维度表dim_film，如图所示。
在这里插入图片描述
24、查看数据表dim_film和数据表dim_film_actor_bridge中的数据
通过SQLyog工具，查看数据表dim_film和数据表dim_film_actor_bridge是否已成功插入数据，查看结果如图所示（这里只展示部分数据）。
数据表dim_film
数据表dim_film_actor_bridge

三、数据库表创建

表dim_actor

CREATE TABLE `dim_actor` (
  `actor_key` INT NOT NULL AUTO_INCREMENT,
  `actor_last_update` DATETIME NOT NULL DEFAULT '1970-01-01 00:00:00',
  `actor_last_name` VARCHAR(45) NOT NULL,
  `actor_first_name` VARCHAR(45) NOT NULL,
  `actor_id` INT NOT NULL,
  PRIMARY KEY (`actor_key`)
) ENGINE=MYISAM AUTO_INCREMENT=601 DEFAULT CHARSET=latin1;

表actor

CREATE TABLE `actor` (
  `actor_id` SMALLINT(5) UNSIGNED NOT NULL AUTO_INCREMENT,
  `first_name` VARCHAR(45) NOT NULL,
  `last_name` VARCHAR(45) NOT NULL,
  `last_update` TIMESTAMP NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,
  PRIMARY KEY (`actor_id`),
  KEY `idx_actor_last_name` (`last_name`)
) ENGINE=INNODB AUTO_INCREMENT=201 DEFAULT CHARSET=utf8;

表dim_film

CREATE TABLE `dim_film` (
  `film_key` INT NOT NULL AUTO_INCREMENT,
  `film_last_update` DATETIME NOT NULL DEFAULT '1970-01-01 00:00:00',
  `film_title` VARCHAR(64) NOT NULL,
  `film_description` TEXT NOT NULL,
  `film_release_year` SMALLINT NOT NULL,
  `film_language` VARCHAR(20) NOT NULL,
  `film_original_language` VARCHAR(20) NOT NULL,
  `film_rental_duration` TINYINT DEFAULT NULL,
  `film_rental_rate` DECIMAL(4,2) DEFAULT NULL,
  `film_duration` INT DEFAULT NULL,
  `film_replacement_cost` DECIMAL(5,2) DEFAULT NULL,
  `film_rating_code` CHAR(5) DEFAULT NULL,
  `film_rating_text` VARCHAR(30) DEFAULT NULL,
  `film_has_trailers` CHAR(4) DEFAULT NULL,
  `film_has_commentaries` CHAR(4) DEFAULT NULL,
  `film_has_deleted_scenes` CHAR(4) DEFAULT NULL,
  `film_has_behind_the_scenes` CHAR(4) DEFAULT NULL,
  `film_in_category_action` CHAR(4) DEFAULT NULL,
  `film_in_category_animation` CHAR(4) DEFAULT NULL,
  `film_in_category_children` CHAR(4) DEFAULT NULL,
  `film_in_category_classics` CHAR(4) DEFAULT NULL,
  `film_in_category_comedy` CHAR(4) DEFAULT NULL,
  `film_in_category_documentary` CHAR(4) DEFAULT NULL,
  `film_in_category_drama` CHAR(4) DEFAULT NULL,
  `film_in_category_family` CHAR(4) DEFAULT NULL,
  `film_in_category_foreign` CHAR(4) DEFAULT NULL,
  `film_in_category_games` CHAR(4) DEFAULT NULL,
  `film_in_category_horror` CHAR(4) DEFAULT NULL,
  `film_in_category_music` CHAR(4) DEFAULT NULL,
  `film_in_category_new` CHAR(4) DEFAULT NULL,
  `film_in_category_scifi` CHAR(4) DEFAULT NULL,
  `film_in_category_sports` CHAR(4) DEFAULT NULL,
  `film_in_category_travel` CHAR(4) DEFAULT NULL,
  `film_id` INT NOT NULL,
  PRIMARY KEY (`film_key`)
) ENGINE=MYISAM AUTO_INCREMENT=3001 DEFAULT CHARSET=latin1;

表language

CREATE TABLE `language` (
  `language_id` TINYINT(3) UNSIGNED NOT NULL AUTO_INCREMENT,
  `name` CHAR(20) NOT NULL,
  `last_update` TIMESTAMP NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,
  PRIMARY KEY (`language_id`)
) ENGINE=INNODB AUTO_INCREMENT=7 DEFAULT CHARSET=utf8;

表film

CREATE TABLE `film` (
  `film_id` SMALLINT(5) UNSIGNED NOT NULL AUTO_INCREMENT,
  `title` VARCHAR(255) NOT NULL,
  `description` TEXT,
  `release_year` YEAR(4) DEFAULT NULL,
  `language_id` TINYINT(5) UNSIGNED NOT NULL,
  `original_language_id` TINYINT(5) UNSIGNED DEFAULT NULL,
  `rental_duration` TINYINT(3) UNSIGNED NOT NULL DEFAULT '3',
  `rental_rate` DECIMAL(4,2) NOT NULL DEFAULT '4.99',
  `length` SMALLINT(5) UNSIGNED DEFAULT NULL,
  `replacement_cost` DECIMAL(5,2) NOT NULL DEFAULT '19.99',
  `rating` ENUM('G','PG','PG-13','R','NC-17') DEFAULT 'G',
  `special_features` SET('Trailers','Commentaries','Deleted Scenes','Behind the Scenes') DEFAULT NULL,
  `last_update` TIMESTAMP NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,
  PRIMARY KEY (`film_id`),
  KEY `idx_title` (`title`),
  KEY `idx_fk_language_id` (`language_id`),
  KEY `idx_fk_original_language_id` (`original_language_id`),
  CONSTRAINT `fk_film_language` FOREIGN KEY (`language_id`) REFERENCES `language` (`language_id`) ON DELETE RESTRICT ON UPDATE CASCADE,
  CONSTRAINT `fk_film_language_original` FOREIGN KEY (`original_language_id`) REFERENCES `language` (`language_id`) ON DELETE RESTRICT ON UPDATE CASCADE
) ENGINE=INNODB AUTO_INCREMENT=1001 DEFAULT CHARSET=utf8;

表category

CREATE TABLE `category` (
  `category_id` TINYINT(3) UNSIGNED NOT NULL AUTO_INCREMENT,
  `name` VARCHAR(25) NOT NULL,
  `last_update` TIMESTAMP NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,
  PRIMARY KEY (`category_id`)
) ENGINE=INNODB AUTO_INCREMENT=17 DEFAULT CHARSET=utf8;

表film_category

CREATE TABLE `film_category` (
  `film_id` SMALLINT(5) UNSIGNED NOT NULL,
  `category_id` TINYINT(3) UNSIGNED NOT NULL,
  `last_update` TIMESTAMP NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,
  PRIMARY KEY (`film_id`,`category_id`),
  KEY `fk_film_category_category` (`category_id`),
  CONSTRAINT `fk_film_category_category` FOREIGN KEY (`category_id`) REFERENCES `category` (`category_id`) ON DELETE RESTRICT ON UPDATE CASCADE,
  CONSTRAINT `fk_film_category_film` FOREIGN KEY (`film_id`) REFERENCES `film` (`film_id`) ON DELETE RESTRICT ON UPDATE CASCADE
) ENGINE=INNODB DEFAULT CHARSET=utf8;

表film_actor

CREATE TABLE `film_actor` (
  `actor_id` SMALLINT(5) UNSIGNED NOT NULL,
  `film_id` SMALLINT(5) UNSIGNED NOT NULL,
  `last_update` TIMESTAMP NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,
  PRIMARY KEY (`actor_id`,`film_id`),
  KEY `idx_fk_film_id` (`film_id`),
  CONSTRAINT `fk_film_actor_actor` FOREIGN KEY (`actor_id`) REFERENCES `actor` (`actor_id`) ON DELETE RESTRICT ON UPDATE CASCADE,
  CONSTRAINT `fk_film_actor_film` FOREIGN KEY (`film_id`) REFERENCES `film` (`film_id`) ON DELETE RESTRICT ON UPDATE CASCADE
) ENGINE=INNODB DEFAULT CHARSET=utf8;

表dim_film_actor_bridge

CREATE TABLE `dim_film_actor_bridge` (
  `film_key` INT NOT NULL,
  `actor_key` INT NOT NULL,
  `actor_weighting_factor` DECIMAL(3,2) DEFAULT NULL,
  PRIMARY KEY (`film_key`,`actor_key`),
  KEY `dim_actor_dim_film_actor_bridge_fk` (`actor_key`)
) ENGINE=MYISAM DEFAULT CHARSET=latin1;
月下清浊
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Kettle：综合案例--构建DVD租赁商店数据仓库
blessings_的博客
11-04 2187
目录 1.加载日期数据至日期维度表 2.加载时间数据至时间维度表 3.加载员工数据至员工维度表 1.加载日期数据至日期维度表 （1）创建转换 使用Kettle工具，创建一个转换，并添加生成记录控件、增加序列控件、JavaScript代码控件、表输出控件以及Hop跳连接线，具体如图所示 （2）配置生成记录控件 双击“生成记录”控件，进入“生成记录”配置界面，在“限制”处添加生成的日期，默认为10，这里改为3650，即生成10年的日期（10*365）；在“字段”框添加字段language（语
Kettle转换作业50个案例代码
数据科学汇集
02-23 6269
Kettle转换作业应用案例 本文是Kettle转换作业微案例相关的脚本（代码）及注释的说明。本项目旨在技术交流与学习，由于本人能力有限，代码中难免有些错误，欢迎留意、私信反馈给我，希望对你有所帮助。 Kettle 50个实用例子 3.1代码地址 CodeChina Github 3.2项目简介 内容简介：该案例代码是围绕Kettle常见组件（覆盖95%）的实用案例，共50个ktr、kjb。 兼容版本:Kettle8.2、Kettle9...
第8章——综合案例（构建DVD租赁商店数据仓库）
m0_57368654的博客
11-23 984
sakila样本数据库是MySQL官方提供的一个模拟DVD租赁商店管理的数据库。本章，我们将综合运用前面几章的知识，对数据库sakila中的数据进行清洗操作，从而构建一个DVD租赁商店数据仓库系统，即实现定期从源数据库sakila中抽取增量数据，转换成符合DVD租赁业务的数据，最后加载到目标数据仓库中。
七十八、Kettle的几个使用案例
象在舞的技术专栏
05-31 5190
上一篇文章我们介绍了一下Kettle以及Kettle的安装部署，本文我们来具体看几个例子，看看Kettle是怎样使用的。使用示例我们基于Windows安装的Kettle进行演示说明。关注专栏《破茧成蝶——大数据篇》，查看更多相关的内容~ 一、案例一 1、需求 把stu1的数据按id同步到stu2，stu2有相同id则更新数据。 2、在MySQL中创建两张表并插入一些数据 create table stu1(id int,name varchar(20),age int); create tabl
Kettle 学习大集合以及实例操作
03-14
Kettle 学习大集合以及实例操作，kettle使用控件的说明
php-8.3.0-Win32-vs16-x64.zip
最新发布
12-15
2. **icudt72.dll**：这是国际部件库（ICU）的数据文件，提供Unicode转换、日期/时间格式化和排序等功能，对于支持多种语言和地区的Web应用非常重要。 3. **php8ts.dll**：这是PHP的核心动态链接库，包含了...
管理规范-集团(公司)内部软件开发需求说明书规范V5.docx
12-17
4. **数据类型**：数据类型（Data Types）规定了软件处理的数据种类和格式，这对于数据的存储、处理和传输至关重要。 5. **控制结构**：7.9.8.3.4的Control Structures涉及程序的逻辑控制，如循环、条件语句等，...
精通SQL--结构化查询语言详解
12-11
8.3.7 select语句各查询子句总结 156 第9章 多表查询 157 9.1 本章用到的实例表 157 9.2 表的基本连接 158 9.2.1 连接表的目的 158 9.2.2 简单的二表连接 159 9.2.3 多表连接 161 9.2.4 使用表别名 162 ...
华笙EzGrid8.3.7版本
06-17
【华笙EzGrid8.3.7版本】是一款先进的数据网格控件，适用于开发高效、功能丰富的数据管理应用。EzGrid8.3.7是该产品线的一个重要升级，为开发者带来了诸多新特性、优化和性能提升，旨在提供更优秀的用户体验和更强大...
Information-Theoretic Aspects of Neural Networks
10-06
8.3.8 Genetic Algorithm Based Optimization 8.4 Simple Genetic Algorithm (SGA) 8.4.1 Fitness Attribution and Reproduction 8.4.2 Crossover 8.4.3 Mutation 8.5 Genetic Algorithms and Neural ...
Kettle使用步骤带案例超详细版_市面最详细版
10-21
文档包含kettle介绍，kettle组件说明以及kettle的使用步骤，超详细，是目前市面上最详细的kettle使用详解，文档中包含两个具体的案例，手把手叫你使用Kettle
大数据 Excel 通过 Kettle 进行数据清洗
12-05
大数据Excel通过Kettle 穿插javascript进行数据清洗 在将数据导入Excel里
kettle实例--数据转换-多数据源合并
fxxhmn的博客
10-25 1423
添加需要改变元数据的字段，将“字段选择”流中的字段进行一致性处理，即单击【获取改变的字段】按钮，获取要改变的字段，并在“Binary to Normal”一列的下拉框中，选择为“是”，使得CSV文件company_a.csv中数据的字段类型与数据表company_b中数据的字段类型一致。双击“增加序列”控件，进入“增加序列”配置界面，在“值的名称”处，指定要增加列的列名，这里使用默认的名称，即valuename，其它配置项不作任何改变；双击“表输出”控件，进入“表输出”控件的配置界面。
《数据清洗》综合案例3
qq_46618641的博客
11-17 475
8.3.5 加载用户数据至用户维度表 1.打开kettle工具，创建转换 使用Kettle工具，创建一个转换load_dim_customer，并添加表输入控件、映射控件、字段选择控件、值映射控件、维度查询/更新控件以及Hop跳连接线，具体如图所示。 2.配置“表输入”控件 双击“表输入”控件，进入“表输入”配置界面，单击【新建】按钮，配置数据库连接，配置完成后单击【确认】按钮。MySQL数据库连接的配置，如图所示。 在SQL框中编写用于获取字段customer_last_update中.
kettle——数据清洗（.xml/.json——＞数据表）
m0_60154718的博客
04-28 1203
准备:①创建xml表的结构②创建json表的结构。
第八章 综合案例
weixin_51670063的博客
11-27 604
kettle第八章作业
Python爬虫+Kettle爬取和清洗网页数据
SweeneyH的博客
01-02 3634
爬虫爬取网页信息并结合ETL工具进行数据清洗处理
第五章Kettle数据的清洗与检验
qq_56941108的博客
11-11 939
Kettle实现完全去重Kettle实现缺失值填充
kettle案例-多数据源合并
wt_125的博客
11-25 222
数据清洗
Cannot resolve io.minio:minio:8.3.7
09-22
Cannot resolve io.minio:minio:8.3.7 是指在引入依赖时，无法解析io.minio:minio:8.3.7的错误。解决这个问题有以下几种方法： 方法一：手动下载依赖包 根据Maven仓库的地址，手动下载io.minio:minio:8.3.7的jar包...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值