学习黑马程序员第八章练习题
8.3.3 加载日期数据至日期维度表
首先建数据库数据写入:
查看数据库数据是否写入:
1.打开kettle创建转换
运用Kettle工具,创建一个转换load_dim_date,并添加生成记录控件、增加序列控件、JavaScript代码控件、表输出控件以及Hop跳连接线,具体如下图所示:
2.配置生成记录控件
双击“生成记录”控件,进入“生成记录”配置界面,在“限制”处添加生成的日期,默认为10,这里改为3650,即生成10年的日期(10*365);在“字段”框添加字段language(语言)、country_code(国家码)、initial_date(初始化的日期),对生成的日期进行初始化,具体如下图所示:
3.配置增加序列控件
进入“增加序列”配置界面,并在“值的名称”处将valuename改为DaySequence,即增加一列日期字段,后续用于改变“生成记录”控件生成的日期,具体如下图所示:
4. 配置JavaScript控件
进入“JavaScript”配置界面,勾选“兼容模式?”处的复选框,使得JavaScript代码控件的兼容性更强;在Java Script代码框中编写代码,具体如下图所示:
5.配置表输出控件
进入“表输出”配置界面,单击【新建】按钮,配置数据库连接,配置完成后单击【确认】按钮。MySQL数据库连接的配置,具体如下图所示:
6.运行转换load_dim_date
运行创建的转换load_dim_date,实现加载日期数据至日期维度表dim_date中,具体如下图所示:
7.查看数据表dim_date中的数据
查看数据表dim_date是否已成功插入3650条日期数据,具体如下图所示:
8.3.3 加载时间数据至时间维度表
1.打开Kettle工具,创建转换
创建一个转换load_dim_time,并添加生成记录控件、增加序列控件、JavaScript代码控件、记录关联(笛卡尔输出)控件、表输出控件以及Hop跳连接线,具体如下图所示:
2.配置生成记录控件
进入“生成记录”配置界面,在“限制”处添加生成的时间,这里添加的是生成24小时数据,起始的时间为0;在“字段”框添加生成小时字段的相关信息,具体如下图所示:
3.配置增加序列控件
进入“增加序列”配置界面,将“值的名称”处将valuename改为hours24,即增加一列小时字段,由于时间是由时分秒构成,因此我们需要生成时分秒字段的数据,这里生成24小时数据,后续步骤中会生成60分和60秒的数据,具体如下图所示:
4.配置JavaScript代码控件
双击“JavaScript代码”控件,进入“JavaScript代码”界面,勾选“兼容模式?”处的复选框,使得JavaScript代码控件的兼容性更强;在Java Script代码框中编写代码;单击【获取变量】按钮,将代码中定义的变量添加至字段框,具体如下图所示:
5.配置生成记录2控件
进入“生成记录”界面,在“限制”后的文本框添加60表示生成60条数据(60分钟从0分开始至59分结束共60条数据);在“字段”框添加生成字段的名称、字段类型及默认值为0,具体如下图所示:
6.配置增加序列2控件
进入“增加序列2”界面,将“值的名称”处将valuename改为minutes,即增加一列分钟字段,用于记录分钟数,在起始值后的文本框内将默认值1修改为0,表示从0开始生成60条数据,即生成数据为0-59,具体如下图所示:
7.配置生成记录3控件
双击“生成记录3”控件,进入“生成记录”界面,在“限制”后的文本框添加60,表示生成60条数据(即60秒钟从0秒开始至59秒结束共60条数据);在“字段”框添加生成字段的名称、字段类型及默认值为0,具体如下图所示:
8.配置增加序列3控件
,进入“增加序列3”界面,将“值的名称”处将valuename改为minutes,即增加一列秒字段,用于记录秒数,在起始值后的文本框内将默认值1修改为0,表示从0开始生成60条数据,即生成数据为0-59,具体如下图所示:
9.配置JavaScript代码2控件
进入“JavaScript代码2”界面,勾选“兼容模式?”处的复选框,使得JavaScript代码2控件的兼容性更强;在Java Script代码框中编写代码;单击【获取变量】按钮,将代码中定义的变量添加至字段框。JavaScript代码2控件的配置,具体如下图所示:
10.配置表输出控件
进入“表输出”界面,单击【新建】按钮,配置数据库连接,配置完成后单击【确认】按钮。MySQL数据库连接的配置,具体如下图所示:
11.运行load_dim_time转换
12.查看数据表dim_time中的数据
8.3.4 加载员工数据至员工维度表
1.打开Kettle工具,创建转换
使用Kettle工具,创建一个转换load_dim_staff,并添加表输入控件、字段选择控件、值映射控件、维度查询/更新控件以及Hop跳连接线,具体如下图所示:
2.配置表输入控件
进入“表输入”配置界面,单击【新建】按钮,配置数据库连接,配置完成后单击【确认】按钮。MySQL数据库连接的配置,具体如下图所示:
3.配置表输入2控件
进入“表输入”配置界面,单击【新建】按钮,配置数据库连接,配置完成后单击【确认】按钮。MySQL数据库连接的配置,具体如下图所示:
4.配置字段选择控件
进入“选择/改名值”界面,在“元数据”选项卡的“需要改变元数据的字段”处添加字段active,由于数据仓库sakila_dw中字段staff_active的数据类型为char类型,因此,我们需要将数据表staff中字段active的数据类型改为String类型,具体如下图所示:
5.配置值映射控件
进入“值映射”界面,在“使用的字段名”处的下拉框选择字段active;在“字段值”框中,添加源值和目标值,这里是将Y替换成Yes,将N替换成No,具体如下图所示:
6.配置维度查询/更新控件
进入“维度查询/更新”界面,具体如下图所示:
7.运行转换load_dim_staff