![](https://img-blog.csdnimg.cn/20201014180756757.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Flink 理论
文章平均质量分 96
Flink 理论
不二人生
刀光剑影江湖情,摧枯拉朽浪滔滔。功名利禄拂衣去,山高水远路迢迢。一个上得了厅堂下得了厨房、左手写诗右手写词的男人
展开
-
Flink理论—容错之状态后端(State Backends)
快照 – 是 Flink 作业状态全局一致镜像的通用术语。快照包括指向每个数据源的指针(例如,到文件或 Kafka 分区的偏移量)以及每个作业的有状态运算符的状态副本,该状态副本是处理了 sources 偏移位置之前所有的事件后而生成的状态。Checkpoint– 一种由 Flink 自动执行的快照,其目的是能够从故障中恢复。Checkpoints 可以是增量的,并为快速恢复进行了优化。外部化的 Checkpoint– 通常 checkpoints 不会被用户操纵。Flink 只保留作业运行时的最近的。原创 2024-02-16 09:03:42 · 25024 阅读 · 0 评论 -
Flink理论—Flink架构设计
Flink 是一个分布式系统,需要有效分配和管理计算资源才能执行流应用程序。它集成了所有常见的集群资源管理器,例如,但也可以设置作为独立集群甚至库运行,例如Spark 的 Standalone Mode本节概述了 Flink 架构,并且描述了其主要组件如何交互以执行应用程序和从故障中恢复。原创 2024-02-16 08:57:37 · 25325 阅读 · 0 评论 -
Flink理论—容错之状态
主要Flink 中的状态分类和使用,并且用实际案例演示了用法;关于状态后端我们可以参考下一节。原创 2024-02-15 10:46:07 · 25004 阅读 · 0 评论