- 博客(1)
- 收藏
- 关注
原创 Flink Watermarks原理
Flink Watermark的原理 Watermark是什么?Watermark就是一个时间戳,它先从输入文件中抽取到EventTime,如果不设最大延迟时间,那么这个时间就是Watermark,你也可以设置一个最大延迟时间,减去这个最大延迟时间就可以得到watermark。 Watermark的是为了处理乱序到达而设立的。什么意思?事件发生是有先后顺序的,但是当他们到达flink的时间可能和这个顺序不一样,这就叫乱序。如果不是流式文件,我们可以怎么处理?我们可以分配一块缓存,等待所有事件到达后,再根据它
2020-08-11 09:07:16 125
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人