Kettle 创建 Transformation

1.第一步,先准备数据和工具

安装好mysql以及客户端工具

数据:


USE `test`;

CREATE TABLE `account` (
  `id` int(11) NOT NULL AUTO_INCREMENT,
  `account_name` varchar(50) CHARACTER SET latin1 NOT NULL,
  `customer_id` int(11) NOT NULL,
  PRIMARY KEY (`id`)
) ENGINE=InnoDB AUTO_INCREMENT=6 DEFAULT CHARSET=utf8;

CREATE TABLE `customer` (
  `id` int(11) NOT NULL AUTO_INCREMENT,
  `customer_name` varchar(50) CHARACTER SET latin1 NOT NULL,
  PRIMARY KEY (`id`)
) ENGINE=InnoDB AUTO_INCREMENT=6 DEFAULT CHARSET=utf8;

CREATE TABLE `trade` (
  `id` int(11) NOT NULL AUTO_INCREMENT,
  `customer_id` int(11) NOT NULL,
  `status` int(11) NOT NULL COMMENT '对内= 1 ,对外= 2',
  `amount` decimal(11,2) NOT NULL,
  `account_id` int(11) NOT NULL,
  PRIMARY KEY (`id`)
) ENGINE=InnoDB AUTO_INCREMENT=6 DEFAULT CHARSET=utf8;

CREATE TABLE `trade_detail` (
  `customer_name` varchar(50) CHARACTER SET latin1 NOT NULL,
  `customer_id` int(11) NOT NULL,
  `account_name` varchar(50) CHARACTER SET latin1 NOT NULL,
  `account_id` int(11) NOT NULL,
  `amount` double DEFAULT NULL,
  `description` tinytext
) ENGINE=InnoDB DEFAULT CHARSET=gbk;

以上
我们建了四个表,客户customer,账户account,交易记录trade,交易明细表trade_detail

现在插入数据

insert into test.`account` (account_name,customer_id) values("account1",1),("account2",1),("account3",1),("account4",1),("account5",1);

insert into test.`customer` (customer_name) values("customer1"),("customer2"),("customer3"),("customer4"),("customer5");

insert into test.`trade` (customer_id,status,amount,account_id) values(1,1,100,1),(1,1,200,2),(1,1,240,3),(1,2,320,4),(1,2,500,5);


用下面的sql查询一下得到每个客户下每个账户的交易明细

SELECT * FROM trade t
LEFT JOIN account a ON t.`account_id` = a.`id`
LEFT JOIN customer c ON c.`id` = t.`customer_id`;


2.我们要用kettle完成将这三个表中的数据汇总到trade_detial表中

看下面一步一步的操作:


2.1我们新建一个Transformation

点击保存按钮,保存到e:/test/etl/transfor.ktr  这个后缀是kettle专用的


2.2从左侧选择【输入】->【表输入】,拖拽到右侧的空白区域,双击【表输入】




新建一个mysql连接,并点击【获取sql查询语句】获得trade的select语句


2.3右侧选择【查询】-【数据库查询】拖拽到空白区域,双击选择数据库连接后,浏览选择account表




如图上,需要填写的部分已经标注出来,中间需要将account表通过account.id = trade.account_id关联起来




2.4再次添加一个【数据库查询】,将account表与customer表关联起来,如下图:



2.5添加【Flow】->【过滤记录】,双击打开,选择status字段,点击下面灰黑色框,弹出【输入一个值】的小界面,输入值:1

表示当status=1的时候为true



2.6 添加两个常量值【转换】->【增加常量】


一个输入false,一个输入true,变量的名称都是一样的“value”,值不一样,分别是:“这里是false值哦”,“这里是true值哦”。


2.7添加表输出【输出】->【表输出】






这里有一部需要注意的是Specify database fields 需要打上钩,刚才忘了打钩了哈

确定后


2.8最后的transform图如下:



大功告成,点击启动运行试试看有没有数据输出到trade_detail去,如下图





乱码用前面文章的方法可以解决哈





评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

码者人生

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值