流批一体计算引擎-13-[Flink]RuntimeExecutionMode和水印策略Watermark Strategy

1 运行时执行模式RuntimeExecutionMode

数据流程序的运行时执行模式。除此之外,它还控制任务
调度、网络洗牌行为和时间语义。一些业务也将发生变化
它们根据配置的执行模式记录发射行为。
(1)RuntimeExecutionMode.STREAMING,管道将使用流语义执行。开始执行之前将部署所有任务,检查点将被启用,处理和事件时间都将被完全支持。

(2)RuntimeExecutionMode.BATCH,管道将使用批处理语义执行。任务将逐步安排在它们所属的调度区域上,区域之间的洗牌将被阻塞、假设水印是“完美的”,即没有延迟的数据,并且假设在执行期间,处理时间没有提前。

(3)RuntimeExecutionMode.AUTOMATIC,如果所有源都是有界的,Flink将设置执行模式为BATCH,如果有至少一个无界的源,则设置为STREAMING。

1.1 流模式STREAMING

from pyflink.datastream import StreamExecutionEnvironment, RuntimeExecutionMode

env = StreamExecutionEnvironment.get_execution_environment(
  • 5
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

皮皮冰燃

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值