Datastage常用stage

Join: 数据集内连接,外连接(Left,Rigth)

Lookup: 数据字典关联,左关联

Transform : 数据计算,通过利用系统函数和表达式进行数据列计算转换,输入输出Mapping;
数据分流,定义constraints数据分流、过滤。
条件表达式:相当于自定义函数

 

Aggregator 汇总
Copy 一个数据集复制为多个数据集
Filter 一个数据集不同过滤条件 多个输出数据集,一个Reject(条件都不满足时)

Funnel  烟囱,多个输入一个输出 ,相当于Union all

Remove Duplicates 去重:一个排序的输入一个非重复输出,依据关键字段判断重复数据
Sort 排序:
Merge : 类似(Union +Join): 包括行的组合和列的组合:关键字一致时列合并,否则行合并.

Change Capture: 两组输入的数据集,Before和After,Change Capture记录了Before数据集经过何种变化变为After数据集,该Stage会产生一个记录变化的结果数据集,表结构与After数据集一致,类似于Oracle Minus,但返回After里的数据集。

  • 0
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值