- 博客(10)
- 收藏
- 关注
RSS订阅原创 综合案例——构建DVD租赁商店数据仓库
8.3.7 加载演员数据至演员维度表1.打开Kettle工具，创建转换使用Kettle工具，创建一个转换load_dim_actor，并添加表输入控件、插入/更新控件以及Hop跳连接线，具体如图所示：2.配置表输入控件双击“表输入”控件，进入“表输入”配置界面，单击【新建】按钮，配置数据库连接，配置完成后单击【确认】按钮。MySQL数据库连接的配置，在SQL框中编写SQL语句，用于获取字段actor_last_update中的最大值，将该值替换为”1970-01-01 00:00:00”并赋值给临
2021-11-17 14:06:43
470
原创 综合案例——构建DVD租赁商店数据仓库
8.3.5 加载用户数据至用户维度表1.打开Kettle工具，创建转换使用Kettle工具，创建一个转换load_dim_customer，并添加表输入控件、映射控件、字段选择控件、值映射控件、维度查询/更新控件以及Hop跳连接线，具体如图所示:2.配置表输入控件双击“表输入”控件，进入“表输入”配置界面，单击【新建】按钮，配置数据库连接，配置完成后单击【确认】按钮。MySQL数据库连接的配置，如图所示:3.配置表输入2控件双击“表输入2”控件，进入“表输入”配置界面，单击【新建】按钮，配置
2021-11-17 13:41:29
365
原创 第八章综合案例——构建DVD租赁商店数据仓库
8.3 案例实现8.3.2 加载日期数据至日期维度表1.打开Kettle工具，创建转换使用Kettle工具，创建一个转换load_dim_date，并添加生成记录控件、增加序列控件、JavaScript代码控件、表输出控件以及Hop跳连接线。2.配置生成记录控件双击“生成记录”控件，进入“生成记录”配置界面,在“限制”处添加生成的日期，默认为10，这里改为3650，即生成10年的日期（10*365）；在“字段”框添加字段language（语言）、country_code（国家码）、initial
2021-11-15 17:01:47
839
原创 数据加载作业
7.1 数据加载机制数据的加载机制与数据的抽取机制相类似，数据的加载机制可以分为全量加载和增量加载。其中，全量加载是指将目标数据表中的数据全部删除后，进行数据加载的操作；而增量加载是指目标表只加载源数据表中变化的数据，其中变化的数据包含新增、修改和删除的数据。7.1.1 全量加载案例实现数据准备假设，现有两张数据表，分别为数据表full_source和数据表full_target，其中数据表full_source为源数据表，数据表full_target为目标数据表。1.打开Kettle工具，创建
2021-11-08 16:09:14
160
原创 数据情洗第二章
1.Excel输入1、打开Kettle工具，创建转换使用Kettle工具，创建一个转换，并添加Excel输入控件，具体如图所示：2、配置“Excel输入”控件双击“Excel输入”控件，进入“Excel输入”配置界面，单击“浏览”按钮，选择物理成绩.xls；单击“增加”按钮示；单击“工作表”选项卡，获取工作表，如图所示；单击“字段”选项卡，添加字段，如图所示：3、单击转换工作区顶部按钮，运行创建的转换，如图所示：2.生成记录1、打开Kettle工具，创建转换使用Kettle工具，创建
2021-11-01 21:48:36
44
原创 第六章操作题
操作题通过使用Kettle工具，实现以下功能：(1)对文本文件personnel_data.txt中的数据进行数据粒度的转换，即将文本文件personnel_data.txt中字段为household_register的数据统一成省份,并输出到文本文件personnel_data_new.txt 中。1、打开...
2021-11-01 15:17:09
87
原创 第五章操作题
通过使用Kettle工具，创建一个转换repeat_transform，并添加“CSV文件输入”控件、“唯一行（哈希值）”控件以及Hop跳连接线，具体如图所示：双击“CSV文件输入”控件，进入“CSV文件输入”配置界面，具体如图所示：单击【浏览】按钮，选择要进行完全去重处理的CSV文件merge.csv；再单击【获取字段】按钮，Kettle会自动检索CSV文件，并对文件中的字段类型、格式、长度、精度等属性进行分析。单击【预览】按钮，查看CSV文件merge.csv的数据是否加载到CSV文件输入流中
2021-10-13 13:06:49
47
原创 数据抽取（加图）
TSV文件的抽取CSV文件抽取HTML网页的数据抽取XML文件的数据抽取
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人