flink_大数据
坐上鲸鱼学技术
我想成为flink大神
展开
-
01-Flink运行架构
1.flink运行时的组件 Flink 运行时架构主要包括四个不同的组件,它们会在运行流处理应用程序时协同工作: 作业管理器(JobManager)、资源管理器(ResourceManager)、任务管理器(TaskManager), 以及分发器(Dispatcher)。因为 Flink 是用 Java 和 Scala 实现的,所以所有组件都会运行在 Java 虚拟机上。每个组件的...原创 2020-02-05 21:35:31 · 319 阅读 · 0 评论 -
02-flink时间语义 与 Window 基础概念与实现原理
Flink 多种时间语义对比 Flink 在流应用程序中支持不同的Time概念,就比如有 Processing Time、Event Time 和 Ingestion Time。下面我们一起来看看这三个 Time。 Processing Time Processing Time 是指事件被处理时机器的系统时间。 如果我们 Flink Job 设置的时间策略是 Processing Ti...原创 2020-01-30 17:19:44 · 137 阅读 · 0 评论