- 博客(10)
- 收藏
- 关注
RSS订阅原创 学习黑马程序员 第八章综合案例—8.3.7-8.3.8
8.3.7加载演员数据至演员维度表1.打开Kettle工具，创建转换创建一个转换load_dim_actor，并添加表输入控件、插入/更新控件以及Hop跳连接线，具体如下图所示：2、配置表输入控件进入“表输入”配置界面，单击【新建】按钮，配置数据库连接，配置完成后单击【确认】按钮。MySQL数据库连接的配置，具体如下图所示：3.配置表输入2控件进入“表输入”界面，单击【新建】按钮，配置数据库连接，配置完成后单击【确认】按钮。MySQL数据库连接的配置，具体如下图所示：..
2021-11-21 21:41:54
4089
1
原创 【无标题】
数据清洗（8.3.5-8.3.6）8.3.5 加载用户数据至用户维度表1.打开Kettle工具，创建转换创建一个转换load_dim_customer，并添加表输入控件、映射控件、字段选择控件、值映射控件、维度查询/更新控件以及Hop跳连接线，具体如下图所示：2.配置表输入控件进入“表输入”配置界面，单击【新建】按钮，配置数据库连接，配置完成后单击【确认】按钮。MySQL数据库连接的配置，具体如下图所示：3.配置表输入2控件进入“表输入”配置界面，单击【新建】按钮，配置数据库连接，配置完成
2021-11-21 21:00:15
666
原创 【无标题】
学习黑马程序员第八章练习题8.3.3 加载日期数据至日期维度表首先建数据库数据写入：查看数据库数据是否写入：1.打开kettle创建转换运用Kettle工具，创建一个转换load_dim_date，并添加生成记录控件、增加序列控件、JavaScript代码控件、表输出控件以及Hop跳连接线，具体如下图所示：2.配置生成记录控件双击“生成记录”控件，进入“生成记录”配置界面,在“限制”处添加生成的日期，默认为10，这里改为3650，即生成10年的日期（10*365）；在“字段”框添加字段l
2021-11-21 20:15:31
439
原创 学习《黑马程序员》第二章中的Excel输入，生成记录，生成随机数，获取系统信息，排序记录，去除重复记录，替换NULL值。
1.创建数据库链接首先建立数据库然后进行连接：表输入：配置表输入与数据库demodbConn进行连接：进行数据库数据的预览：csv文件输入：查看表中的数据：查看csv中的数据：Excel数据输入：进行Excel输入配置：最后查看结果：生成随机记录：配置生成随机记录：查看结果：生成随机数：排序记录：...
2021-11-08 15:30:16
4784
原创 学习黑马程序员—第六章课后习题
题目就不进行赘述了，有些配置过程一模一样的便进行跳过了，因为截图有点多：习题中用到的很多方法是在课本上讲授过的，根据老师讲过的内容可以很容易的实现这个过程，但是将数据写入数据库可能比较费时。...
2021-11-01 15:48:30
581
原创 学习黑马程序员，第五章练习题
通过Kettle工具实现以下功能：1.对文件进行去重:完全去重：消除完全重复的数据，数据表字段值完全一样的数据。首先配置csv文件配置唯一行（哈希值）控件运行结果：2.对文件中缺失的数据进行填充创建转换：文本文件配置：在这个过程中我遇到了一个问题，就是预览记录中获取不了完整的数据而是只获取到一个，后来进行手动输入才合适了（后来找到原因是由于没有表头的原因获取不到）手动输入结果如下：过滤记录配置：合并记录配置：...
2021-10-20 11:21:32
744
原创 学习黑马程序员第四章，习题练习
在学习了第四章之后，进行了练习和总结，其中练习有课内的还有习题，习题练习如下：1.抽取CSV文件保存到extract, 在此之前我就完成了一次抽取，再做第二次的时候已经是很熟悉了，但是仍然出现了问题，在我进行第二次转化之前运行了上一次转换，出现了下图的错误。这个问题出现在哪里呢？根据错误提示可以看出我的MYSQL没有打开，后来经过学习才知道原来是我的mysql服务必须手动打开，要不然没法连接。打开就可以进行上一次的运行，然后我进行了第二次的转化练习。首先配置CSV文件输入...
2021-09-30 17:10:13
804
原创 学习黑马程序员，第三章读后感
这章内容主要实现转换和作业，学习了课本上的理论知识后，照猫画虎的操作了一下在Kettle上，在这个过程中虽然是模仿但是仍然还有有很多问题的出现，所以我进行了自己的练习。 首先我仿照书内容进行了实操，是一些基本的操作。 在这些操作过程中没有任何问题的出现。 第二个是进行表格的转化，这个过程中遇到了很多问题，具体如下。在转化是红色的警示出现了，所以意味着我在写插入/更新的时候出了问题，我虽然是按照书本上的操作，还是出现了问题，所以我便进行...
2021-09-26 17:48:47
146
原创 2021-09-12
学习，黑马程序员《数据清洗》笔记第一章.数据的概述 大数据时代的来临标志着海量数据的产生，数据类型也越来越繁多，因此数据中会夹杂着不完整、重复、不完整的数据，直接使用这些数据会影响数据决策的准确性和效率。所以，清洗数据变得尤为重要，本章节就详细的介绍了数据清洗的概述。一、数据清洗的背景 1.1数据仓库 由数据仓库之父比尔·恩门（Bill Inmon）于1990年提出，主要功能仍是将组织透过资讯系统之联机事务处理(OLTP)经年累月所累积的大量资料，透...
2021-09-12 10:57:27
525
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人