第7章——数据加载(案例三:数据的批量加载)

1.数据准备

假设,现有一个CSV格式的微博用户信息文件weibo_user.csv,其中包含了用户id、用户名称、用户性别、用户简介等字段,文件weibo_user.csv的具体内容如图所示(这里只截取了部分数据)

2. 打开Kettle工具,创建转换

3. 配置CSV文件输入控件

在“文件名”处单击浏览按钮,选择要抽取的CSV文件weibo_user.csv;单击获取字段按钮,让Kettle自动检索CSV文件,并对文件中字段的类型、格式、长度、精度等属性进行解析,具体如图所示。

 单击预览按钮,查看CSV文件weibo_user.csv的数据是否抽取到CSV文件输入流中,具体如图所示。

4. 配置表输出控件

双击“表输出”控件,进入“表输出”配置界面,单击新建按钮,配置数据库连接,配置完成后单击确认按钮。数据库连接的配置,具体如图所示。

 单击目标表右侧的浏览按钮,选择输出的目标表,即数据表weibo_user(该表需提前创建,且表结构需根据文件weibo_user.csv中数据的字段和数据类型进行创建,这里不作演示);勾选“指定数据库字段”的复选框,用于将weibo_user数据表的字段与weibo_user.csv文件中的字段进行匹配;勾选“使用批量插入”的复选框,用于批量加载数据至目标表中,如图所示。

选择“数据库字段”选项卡,单击输入字段映射】按钮,弹出“映射匹配”对话框,依次选中“源字段”选项框的字段和“目标字段”选项框的字段,再单击【Add】按钮,将一对映射字段添加至“映射”选项框中,若“源字段”选项框的字段和“目标字段”选项框的字段相同,则可以单击猜一猜按钮,让Kettle自动实现映射,具体如图所示。

 

 5.运行转换,成功后结果如下:

6. 查看数据表weibo_user是否已成功加载到数据,查看结果如图所示。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值