kettle学习
文章平均质量分 55
kettle是一个很不错的ETL工具,具有强大的功能,支持定时任务,让我们进行数据对接和数据清洗工作变得更加灵活方便。下面让我们一起来学习kettle的使用吧,希望大家多多指点。
黄爱岗
向目标前进,永不放弃。
展开
-
数据对接—kettle使用之十六
这一篇我们继续介绍转换插件的使用,Row Normaliser、行转列和字段选择。Row Normaliser控件这个步骤转动表,标准化数据格式。原创 2014-04-27 21:45:03 · 4250 阅读 · 6 评论 -
数据对接—kettle使用之十五
这一篇我们继续介绍转换插件的使用,Row Normaliser、行转列和字段选择。Row Normaliser控件这个步骤转动表,标准化数据格式。原创 2014-04-27 19:26:23 · 8371 阅读 · 0 评论 -
数据对接—kettle使用之十四
这一篇我们继续介绍转换插件的使用,Row Normaliser、行转列和字段选择。Row Normaliser控件这个步骤转动表,标准化数据格式。原创 2014-04-27 19:00:06 · 3720 阅读 · 0 评论 -
数据对接—kettle使用之十三
这一篇我们继续介绍字符串处理插件的使用,增加常量控件和增加序列字段。增加常量控件这个步骤很简单,主要是添加常量到流中。它的使用也很容易:用字符串形式指定名称,类型和值。利用选择的数据类型指定转换格式。原创 2014-04-27 18:17:12 · 5307 阅读 · 1 评论 -
数据对接—kettle使用之十二
这一篇我们继续介绍字符串处理插件的使用,增加常量控件和增加序列字段。增加常量控件这个步骤很简单,主要是添加常量到流中。它的使用也很容易:用字符串形式指定名称,类型和值。利用选择的数据类型指定转换格式。原创 2014-04-27 17:52:35 · 4067 阅读 · 0 评论 -
数据对接—kettle使用之十一
这一篇我们继续介绍字符串处理插件的使用,增加常量控件和增加序列字段。原创 2014-02-28 23:56:51 · 4777 阅读 · 4 评论 -
数据对接—kettle使用之十
上一篇介绍了字符串处理插件替换字段,并通过实例介绍插件的简单使用。这一篇我们介绍另外五个字符串处理插件的使用,它们分别是:Setfield value替换值控件、Setfield value to a constant替换为固定值,如果是日期类型还可以配置日期格式、Splitfield to rows(分隔控件)、String operations(字符串操作控件)、Strings cut(剪切控件)。原创 2014-02-28 23:56:20 · 6635 阅读 · 1 评论 -
数据对接—kettle使用之九
上一篇介绍了值映射插件,并通过实例介绍插件的简单使用,类似值映射控件,它也是改变值得一个控件。这一篇我们介绍另一个处理字符串的控件(替换字段)的使用。原创 2014-02-28 23:55:43 · 4076 阅读 · 1 评论 -
数据对接—kettle使用之八
之前由于一些事情耽误了,博客一直没有更新,今天开始继续完善kettle的学习,这一节开始了解转换控件的使用,首先从值映射控件开始。值映射:这个步骤是简单的映射字符串,从一个值映射到另一个值。例子如下:1、输入或者读取数据库某列值2、值映射控件设置如下:3、输出到日志4、成功转换,日志输出结果:总结: 目原创 2014-02-28 23:54:50 · 5550 阅读 · 3 评论 -
数据对接—kettle使用之七
上一篇介绍了数据输入的插件,这一篇介绍一下数据输出的插件,类似数据输入,输出的插件也有很多,可以将数据输出到文本文件,excel文件,xml文件,还可以根据sql语句删除数据库表里的数据,也可以使用插入/更新插件insert或update数据库表里的指定字段,下面先来看几个输出的插件:原创 2013-11-11 21:48:19 · 5543 阅读 · 2 评论 -
数据对接—kettle使用之六
前面介绍了表输入的插件,我们可以用它来查询数据库表里的数据,那如果数据不在数据库里我们是不是没没有办法获取了呢?答案是否定的,这个软件还提供了其它的插件可以让我们轻松的获取excel、xml、文本文件等文件里的数据 ,下面我们就一起来简单的了解一下这些插件:原创 2013-10-31 23:43:53 · 5353 阅读 · 2 评论 -
数据对接—kettle使用之五
获取系统信息的插件功能非常强大,它可以帮助我们获取我们需要的各种系统信息,也支持我们自定的一些系统信息,有了它让我们写的脚本功能更加强大,更加简单灵活。原创 2013-10-31 23:43:29 · 5244 阅读 · 0 评论 -
数据对接—kettle使用之四
表输入插件在做数据对接的时候是用的比交多的一个,在它里面可以通过复杂的sql语句来满足我们不同的业务需求,针对不同的数据还可以加入一些函数的使用,查出来的数据自动输入到流中,流向下一步方便我们做其他操作,它还支持变量作为条件,就是那个“?”可以是上一步传过来的值,后面的博客中会出现具体使用实例,这篇就介绍到这里,有兴趣的可以深入研究,也欢迎交流,共同进步。原创 2013-10-31 23:28:42 · 5418 阅读 · 2 评论 -
数据对接—kettle使用之三
上一篇介绍了Data Grid和文本文件输出两个插件,并通过实例介绍插件的简单使用,如果有这样的需求大家可以参考一下并深入研究插件的其它细节设置。这一篇我们介绍(表输出)的使用表输出可以自动的创建表及字段,这样我们可以用它来处理一些特殊的动态的创建表并保存数据的业务需求,而且表输出的效率也要比更新插入插件的高原创 2013-09-30 18:01:08 · 6709 阅读 · 2 评论 -
数据对接—kettle使用之二
简单测试,Data Grid和文本文件输出的使用原创 2013-09-29 23:33:41 · 7142 阅读 · 7 评论 -
数据对接—kettle使用之一
你有没有遇到过不同数据库之间数据对接的需求,比如:mysql数据库里的数据要保存到oracle数据库里,或者是excel里的数据要保存到数据库里,或者是数据库的数据要定时的保存到文件中等等数据对接的问题。下面就开始介绍一款软件来帮助我们实现各种数据对接的问题,这将是一个系列的博客,这篇只是个开始,后面将陆续的通过实例来讲解软件如何使用,当然不可能面面俱到,很多功能还需要我们不断的挖掘和完善原创 2013-09-28 18:14:44 · 8909 阅读 · 5 评论