![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
etl
Mr_Tanga
这个作者很懒,什么都没留下…
展开
-
kettle从数据库添加要求指定的日期内的数据,并且时间实现自增模式
首先我们有三张表事务表1EVENT_TEMP01 (ID,代码,说明,START_TIME)事务表2EVENT_TEMP02 (ID,代码,说明,START_TIME)时间表TIME_TEMP01(ID,START_TIME,END_TIME)三张表根据时间表的字段的开始时间,与最终时间获取事务表1的录入时间的这短时间的数据,并且这个任务执行完成之后,数据...原创 2018-08-27 16:50:24 · 6790 阅读 · 0 评论 -
win10下kettle安装
首先我们先下载一个kettle的安装包链接如下https://pan.baidu.com/s/1J5MlxdThL2RSTFj43rpcoQ下载完成后解压因为这个kettke是需要jdk的辅助的,所以要在电脑上安装一个jdk,可以搜索我的文章https://blog.csdn.net/mr_tanga/article/details/80996238,这篇文章介绍的是jdk的安装之后安装完成之后我...原创 2018-07-11 16:35:46 · 4018 阅读 · 0 评论 -
kettle插入/更新的使用
插入更新的主要作用就是根据条件来检索数据,如果说相同 更新,不相同添加!假设一个业务场景,我们需要从这个数据库的表里面拿数据,但是,在输出表里面可能会有相同的数据我们先假设我们的输出表和输入表判断是否相同的依据是id我此时运行我的数据,他有10w行数据,可是到了一半,运行失败了出现了某某因素然后我如果删除的话,那么我之前的历史数据也会删除掉,那么怎么办我们打开这个插入/更...原创 2018-07-23 16:24:55 · 18942 阅读 · 6 评论 -
Kettle从入门到放弃,值得收藏
【Kettle从零开始】一之Kettle简单介绍 http://blog.csdn.net/rotkang/article/details/20810921【Kettle从零开始】二之Kettle文件夹与界面介绍http://blog.csdn.net/rotkang/article/details/20875367【Kettle从零开始】三之Kettle数据源连接配置http://blo...转载 2018-07-12 10:04:08 · 12848 阅读 · 3 评论 -
kettle连接数据库,官方jdbc jar包下载以及布置安装
我们在配置kettle 的spoon服务器时候,然后链接mysql的服务器的链接,可是怎么也连不上,怎么也连不上,这时候我们的小伙伴就很发愁,第一反应是配置错了,可是仔细看配置没错,哈哈哈没关系,我们先看看我报的错 错误连接数据库 [tcc] : org.pentaho.di.core.exception.KettleDatabaseException: Error occurre...原创 2018-07-12 14:21:52 · 18156 阅读 · 7 评论 -
kettle环境变量的配置问题
这篇文章主要介绍的就是关于kettle环境变量的问题,具体实现就是简化数据库名字来说吧,我感觉没啥卵用,但是还是要说一下首先我们有两种方式去改变这个环境变量,一种是永久性,一种是临时性,永久性是在我们的C盘的,用户,用户名称下面的.kettle文件 okok,那么这个点开之后,发现有很多文件我只打开我需要的文件,之后进行配置 配置基本上就是kv形式的 ,所以就没...原创 2018-07-18 14:10:11 · 11727 阅读 · 0 评论 -
kettle的资源库创建
在学kettle的同时,我在某某学习视频上到了新建资源库的这一步骤,很是蒙啊,因为他的spoon是4.x的版本,而我安装的是7.0所以这个新建资源库就没找到。后来参考资料找到了,如下图所示点进去之后这二者点那个小字体。然后亮两个选择,我们点击上面的这个,因为上面这个就是常规的数据库链接,下面的那个需要进行参数配置然后我们点进去之后第一个我们输入的是自定义的库名称,第二个是我们链接数据库的通道前者不...原创 2018-07-13 11:00:42 · 1012 阅读 · 0 评论 -
数据仓库项目如何选择etl工具,etl还是elt????
根据以往数据仓库项目的经验,在一个数据仓库项目中,ETL设计和实施的工作量一般要占总项目工作量的40%-60%,而且数据仓库项目一般会存在二次需求的问题,客户在项目的实施过程中或者使用过程中会提出新的业务需求,而任何前端业务模型的改变都会涉及到ETL设计,因此ETL工具的选择对于整个数据仓库项目的成功是非常重要的。Oracle在收购Sunopsis后宣称自己的ETL工具是基于EL-T架构的,很多同...转载 2018-07-13 16:23:08 · 2202 阅读 · 0 评论 -
NIFI添加数据库连接
首先打开我们的nifi网页。我们自定义一个PROCESSOR我打开一个executor_sql 然后打开链接点这个后面的箭头然后点这个之后说是让我们添加数据库,在这搜索 DBCP,然后会出现一个返回点这个设置这个name主要是这个数据库链接的名字,类似与这个数据库的注释真正的数据库链接在PROPERtIES我们要添加的一共就4个类似,最后一个...原创 2018-07-26 09:42:16 · 6396 阅读 · 1 评论