Flink
zuolixiangfisher
有空一起钓鱼啊
展开
-
Flink的一些核心概念
初识 Flink,我觉得需要了解一些基本的概念,对后续开发 Flink 程序有帮助 1、抽象层级 flink 对开发流式 / 批处理应用提供了不同的抽象层级 最底层的抽象仅仅提供了 stateful streaming ,它利用 process function 嵌入到 DataStream API 里,允许用户可以自由地处理来自一个或多个流数据的事件,并使用一致、容错的状态。除此之外,用...原创 2019-01-23 18:51:20 · 695 阅读 · 0 评论 -
Flink基本概念(2)
分布式运行环境 1、Tasks and Operator Chains 对于分布式执行过程,Flink将算子子任务链接到同一任务中。 每个任务由一个线程执行。 将算子链接到同一任务是一项有用的优化:它可以减少线程到线程切换和缓冲的开销,并在降低延迟的同时提高整体吞吐量。 2、Job Managers, Task Managers, Clients Flink 运行环境包含两种过程 JobMana...原创 2019-01-26 22:21:05 · 189 阅读 · 0 评论