1.现有两张数据表,分别为数据表full_source和数据表full_target,其中数据表full_source为源数据表,数据表full_target为目标数据表。
通过使用Kettle工具,实现将数据表full_source中的数据全量加载到数据表full_target中。
具体操作如下:
(1)打开Kettle工具,创建转换
使用Kettle工具创建转换full_load,添加“执行SQL脚本”控件、“表输入”控件、“表输出”控件。
(2)配置“执行SQL脚本”控件
双击“执行SQL脚本”控件,进入此控件界面中,首先点击“新建”按钮,配置数据库连接,配置完成后单击“确认”按钮。
然后在SQL框中编写数据表full_target中数据的SQL语句;最后单击“确认”按钮,完成“执行SQL脚本”的配置。具体如下图所示。
(3)配置“表输入”控件
双击“表输入”控件,进入此控件界面中,首先在SQL框中编写查询数据表full_source数据的SQL语句。
单击“预览”按钮,查看数据表full_source的数据是否成功抽取到表输入流中;最后单击“关闭”-“确认”按钮,完成“表输入”的配置。具体如下图所示。
(4)配置“表输出”控件
双击“表输出”控件,进入此界面中,首先单击“浏览”按钮,选择输出的目标表,即数据表full_target,然后单击“确定”按钮,完成“表输出”的配置。具体如下图所示。
(5)运行转换full_load,并查看数据表full_target中的数据
从下图中可以看出,数据表full_target中已经加载到数据。
2.现有两张数据表,分别为incremental_source和incremental_target,其中incremental_source为源数据表,incremental_target为目标数据表。数据表incremental_source和incremental_target的表结构、数据都是相同的.
通过使用Kettle工具,实现将数据表incremental_source中的数据增量加载到数据表incremental_target中,即将数据表incremental_source中新增、变化的数据加载到数据表incremental_target中。
(注:新增数据,在数据表incremental_source中新增一条id为6、name为Mary、age为23的数据;变化数据,修改数据表incremental_source中id为2的数据,将该条数据的age值改为25)。
具体操作如下:
(1)打开Kettle工具,创建转换
打开Kettle工具创建转换incremental_load,添加“表输入”控件、“插入/更新”控件。
(2)配置“表输入”控件
双击“表输入”控件,进入此界面中,首先单击“新建”按钮,完成数据库的连接
然后在SQL框中编写查询数据表incremental_source数据的SQL语句,单击“预览”按钮,查看数据是否成功抽取到表输入流中
最后单击“关闭”-“确定”按钮,完成“表输入”的配置。具体如下图所示。
(3)配置“插入/更新"控件
双击“插入/更新”控件,进入此控件界面中,首先打击“新建”按钮,配置数据库连接。
然后单击目标表中的“浏览”按钮,弹出“数据库浏览器”窗口,选择目标表incremental_target;单击“获取字段”按钮和“获取和更新字段”按钮。单击“确定"按钮,完成”插入/更新“控件的配置。具体如下图所示。
(4)修改数据表incremental_source中的数据
(5)运行转换并查看数据表incremental_source中的数据
以上操作中Kettle实现了将数据表incremental_source中的数据增量加载到数据表incremental_target中。