kettle （7.3 批量加载）

通常情况下，对于几千条甚至几十万条记录的数据迁移而言，采取DML（即数据操纵语言）的INSERT语句能够很好地将数据迁移到目标数据库中。然而，当数据迁移量过于庞大时，就不能使用INSERT语句，因为执行INSERT、UPDATE以及DELETE语句的操作都会生成事物日志，事物日志的生成会减慢加载的速度，故需要针对数据采取批量加载操作。

一、创建转换

 

二、配置控件

1、CSV文件输入

在“文件名”处单击“浏览”按钮，选择要抽取的CSV文件weibo_user.csv并单击“获取字段”按钮。

单击“预览”按钮，查看CSV文件weibo_user.csv的数据是否抽取到CSV文件输入流中 。

 

2、表输出

连接数据库并点击“数据库字段”

 

三、执行结果