Flink的作业链

基本概念

**概念:**使用链条将相关性强的操作绑定在一起,让上下游的Task在同一个Pipeline中执性
**好处:**避免因为数据在网络或者线程间传输导致的开销

禁用全局链条

streamExecutionEnvrinonment.disableOperatorChaining()

关闭全局作业链后,使用startNewChain()创建对应Operator的链条,创建的链条只对当前操作符及之后的操作符有效

dataStream.filter(...).map(...).startNewChain().map(...)

两个map进行绑定,对filter无影响

禁用局部链条

使用disableChaining()禁用当前操作符上的链条

dataStream.map(...).disableChaining

只禁用map操作上的链条,且不会对其他操作符产生影响

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值