kettle使用小记

最新推荐文章于 2023-03-22 16:50:10 发布
最新推荐文章于 2023-03-22 16:50:10 发布
阅读量104 收藏
点赞数
分类专栏： pentaho BI
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zhzhiqun/article/details/84243380
版权
1. kettle调用存储过程
可以使用 sql脚本的形式，内容为 
call startpage_proce(${yesterday});


2. 数据流中的维度名称等数据转换成维度ID

[img]http://dl.iteye.com/upload/attachment/0070/2752/2b6420fb-addd-38f1-8492-b62af5a28a4c.jpg[/img]

3. 过虑记录中的正则表达式的使用

可以使用正则的方式匹配数据类型，也可以对字符的长度做控制。
[img]http://dl.iteye.com/upload/attachment/0070/2754/2eb41b71-aeca-3079-b1c3-b22dea7d31ad.jpg[/img]
zhzhiqun
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Kettle实践二
weixin_30648963的博客
01-27 63
Kettle的全局变量定义是通过当前用户下.kettle文件夹中的kettle.properties文件来定义。定义方式是采用键=值对方式来定，如：date=20140103，重启kettle后生效。 局部参数变量是通过“Set Variables”来设置，使用方法有两种：一种是%%变量名%%，一种是${变量名}。 例子： 1、创建相应的参数变量设置转换与数据流抽取转换。 2、通过“获取系...
Kettle变量和参数介绍系列文章2-参数的使用
m0_69586799的博客
08-17 4671
本文介绍了Kettle中主要参数的使用方法，大家可以和变量的使用方法进行下对比，在实际业务中根据业务需要选择合适的实现方式。
kettle的输入输出组件和脚本组件
weixin_30670925的博客
08-03 692
一、 输入组件 1.1表输入 从指定的数据库中，通过sql语句来查询数据加载到内存。 允许简易转换：勾选后可以避免不必要的字段的数据类型转换，从而提高性能。 替换sql语句里的变量：勾选后可以通过${queryDate}来使用queryDate变量。 从步骤中插入数据：以上次的步骤中的数据作为数据的参数，使用？来获取上步骤的数据，查询多个列就多个？接受。 从步骤中插入数据的例子： c...
kettle学习笔记（四）——kettle输入步骤
weixin_30686845的博客
05-04 587
一、输入步骤概述 　　输入步骤主要分为以下几类： 　　　　• 生成记录/自定义常量　　　　• 获取系统信息　　　　• 表输入　　　　• 文本文件输入　　　　• XML 文件输入　　　　• Json输入　　　　• 其他输入步骤 二、生成记录和自定义常量 　　 　　1.生成记录 　　　　 　　　　由于生成记录每行都是一样的数据，所以便诞生了自定义常量数据来手工模拟数据 　　2.自定义常...
Kettle变量和参数介绍系列文章1-变量的使用
m0_69586799的博客
07-31 1万+
本文主要讲述Kettle中变量的分类，并针对每一类变量的使用进行说明。
kettle使用事务的转换
03-23
kettle使用事务的转换
KETTLE使用教程
11-23
Kettle简介：Kettle是一款国外开源的ETL工具，纯java编写，...1、Kettle的下载与安装（在本文中使用的kettle版本为kettle7.1.0.0-12） 2、打开kettle。 　首先解压下载下来的压缩包如:pdi-ce-7.1.0.0-12(官方下载).zip
kettle使用
07-11
Kettle这个ETL工具集，它允许你管理来自不同数据库的数据，通过提供一个图形化的用户环境来描述你想做什么，而不是你想怎么做。 Kettle中有两种脚本文件，transformation和job，transformation完成针对数据的基础...
kettle使用说明
07-31
kettle使用说明kettle使用说明kettle使用说明kettle使用说明kettle使用说明kettle使用说明kettle使用说明kettle使用说明kettle使用说明kettle使用说明
Kettle基本使用（一） —— 输入的使用
qq_52421831的博客
10-24 3964
Kettle简单使用之输入的使用
kettle—参数传递
最新发布
03-22 3万+
下面我们总结了一下位置参数、命名参数、变量的优缺点，然后文章中介绍了变量的使用的两种方式通过设置变量组件设置然后获取使用通过转换获取设置变量然后获取使用位置参数（argument）命名参数（parameter）变量（variable）说明根据参数的位置来设置和读取参数值，用于在KJB外部传入，并在KJB内部使用根据参数的名字来设置和读取参数值，用于在KJB外部传入，并在KJB内部使用由用户自定义，在KJB内部随时随地的定义、赋值和使用关键点。
Kettle 调用存储过程
写博客只为学习
04-11 1万+
不带参数的存储过程可以直接使用“调用DB存储过程”控件，将存储过程名称配置进去即可。 带返回值的参数 CREATE OR REPLACE PROCEDURE JOBTEST(CCX OUT NUMBER) AS BEGIN CCX:=88 ; DBMS_OUTPUT.PUT_LINE(CCX); END ; 前一个步骤需要指定参数 CCX
【Kettle从零开始】第八弹之Kettle变量参数传递介绍
热门推荐
RotKang
03-11 6万+
对于ETL参数传递是一个很重要的环节，因为参数的传递会涉及到业务数据是如何抽取。下面我为大家举例一个简单的需求。 需求说明：需要抽取昨天的数据装载到目标表中。   1、  参数作用域？ 答：Kettle中参数大致可分为两类：一类是全局参数，一类是局部参数。   2、  参数如何定义？ 答： A：全局参数定义是通过当前用户下.kettle文件夹中的kettle.propert
开源ETL工具kettle系列
Matt的技术专栏
05-29 4万+
开源ETL工具kettle系列之常见问题摘要：本文主要介绍使用kettle设计一些ETL任务时一些常见问题，这些问题大部分都不在官方FAQ上，你可以在kettle的论坛上找到一些问题的答案1. Join我得到A 数据流（不管是基于文件或数据库），A包含field1 , field2 , field3 字段，然后我还有一个B数据流，B包含field4 , field5 , field6
kettle取昨天时间&设置任意时间变量案例
Deng_7788的博客
10-29 1608
参考： https://blog.csdn.net/xiaohai798/article/details/41867835 1、新建转换-核心对象-输入-获取系统信息拖动到右边的面板中-双击编辑获取系统信息-写入名称-选择类型，可以选择系统日期 2、核心对象 - 脚本-JavaScript代码 拖到右边面板中- 点击获取系统信息 按住shift拖向JavaScript代码-双击编辑JavaScr...
kettle 参数、变量和全局变量(kettle.properties)使用
qq_41211365的博客
02-04 2686
kettle 参数、变量和全局变量(kettle.properties)使用 parameter实现的两种方法 1.首先，打开.kettle\ kettle.properties，直接在里面定义，（ 注意这个文件需要与spoon.bat放在同一个目录下面）比如： paramName=to_char(sysdate,‘yyyymmdd’) 这里 支持数据库函数， 说的更直白点，就是这里定义是个啥，那么在transformation里边取到的它就是啥。 2.定义之后，保存，重启spoon。 3.在需要的地方，直
kettle文件自动化部署（shell脚本执行）：命令行参数传入
longshenlmj的专栏
02-27 1万+
shell脚本（crontab 定期执行），调用kitchen 和 pan 去执行，job和transformation文件。 分 windows和 dos系统两种。 太简单不写了。   shell脚本懒得贴了，不懂百度
Kettle系统知识讲解一
说文科技，做有态度的研究。
07-24 1万+
Kettle系统知识讲解一 1.kettle简介 1.数据仓库领域的一个重要概念就是数据整合。数据整合就是把不同数据库中的数据组合到一起，对外提供统一的数据视图。 2.kitchen用于执行作业，pan用于执行转换。 3.跳就是从一个作业项/步骤的中心连接到另一个作业项/步骤的一条线。在作业里跳定义的是控制流，在转换里跳定义的是数据流。 4.转换(transformation)是et...
Kettle ETL工具使用详解
"Kettle使用手册提供了关于这款开源ETL工具的详细操作指南，包括ETL的基本概念、Kettle的特点以及如何部署和运行Kettle。手册中提到了Kettle中的两种核心脚本文件——transformation和job，前者用于数据转换，后者...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值