flink架构
文章平均质量分 90
Brook?
这个作者很懒,什么都没留下…
展开
-
(exactly-once)Flink 如何实现端到端的一致性(kafka+flink+kafka)
flink 内部实现 exactly-once 原理!Checkpoint 原理!两次提交原理原创 2021-11-18 11:21:54 · 2009 阅读 · 0 评论 -
flink运行架构详解
一、开发模式per-job-cluster 提交模式1.一个Job会对应一个Flink集群,每提交一个作业会根据自身的情况,都会单独向yarn申请资源,直到作业执行完成,一个作业的失败与否并不会影响下一个作业的正常提交和运行。独享Dispatcher和ResourceManager,按需接受资源申请;适合规模大长时间运行的作业。2.优点每次提交都会创建一个新的flink集群,任务之间互相独立,互不影响,方便管理。任务执行完成之后创建的集群也会消失。Session-Clust...原创 2021-11-10 00:01:02 · 1580 阅读 · 0 评论