![](https://img-blog.csdnimg.cn/22c611dcf492471c8faee0c946459a30.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
flink scala
文章平均质量分 82
flink scala
959y
奋斗ing
展开
-
[Flink] 容错机制与状态一致性机制
Flink的容错机制以及状态一致性机制, 从checkpoint和savepoint分析原创 2023-02-02 19:45:44 · 1028 阅读 · 0 评论 -
Flink_面试题4
文章目录1.聚合函数 GroupBy、Distinct、KeyBy 等函数时 出现数据热点该如何解决2.Flink 任务延迟高如何解决3.Flink 是如何处理反压的4.Flink 的反压和 Strom 有哪些不同5.Operator Chains(算子链)6.什么情况下形成算子链7.Flink1.9 的新特性8.消费 kafka 数据的时候,如何处理脏数据1.聚合函数 GroupBy、Distinct、KeyBy 等函数时 出现数据热点该如何解决数据倾斜和热点数据是大数据不可绕过去的问题1.在业务上原创 2021-12-17 17:28:48 · 1414 阅读 · 0 评论 -
Flink面试题_3
文章目录1.Flink 是如何支持批流一体的2.Flink 是如何做到高效的数据交换的3.Flink 是如何做容错的4.Flink 分布式快照的原理是什么5.Flink 是如何保证 Exactly-once 语义的6.说说 Flink 的内存管理是如何做的7.Flink 的序列化8. Flink 中的 Window 出现了数据倾斜,你有什么解决办法9.Flink SQL 的实现原理是什么1.Flink 是如何支持批流一体的Flink 的开发者认为批处理是流处理的一种特殊情况。批处理是有限的流处理。Fl原创 2021-12-11 22:57:37 · 1095 阅读 · 0 评论 -
Flink面试题_2
文章目录1.Flink 的并行度了解吗?Flink 的并行度设置是怎样的?2.Flink 的 Slot 和 parallelism 有什么区别3.link 有没有重启策略?说说有哪几种?4.用过 Flink 中的分布式缓存吗?如何使用?5.说说 Flink 中的广播变量,使用时需要注意什么6.Flink 中的窗口7.说说 Flink 中的状态存储8.Flink 中的时间9.watermark1.Flink 的并行度了解吗?Flink 的并行度设置是怎样的?Flink 中的任务被分为多个并行任务来执行,其原创 2021-12-10 20:39:21 · 612 阅读 · 0 评论 -
Flink面试题_1
1.Flink 相比传统的 Spark Streaming 区别Fink 是标准的实时处理引擎,基于事件驱动。而 Spark Streaming 是微批(Micro-Batch)的模型。架构模型 Spark Streaming 在运行时的主要角色包括:Master 、Worker、Driver 、Executor,Flink 在运行时主要包含:Jobmanager、Taskmanager 和 Slot。任务调度 Spark Streaming 连续不断的生成微小的数据批次,构建有向无环图 DAG,S原创 2021-12-03 23:42:56 · 619 阅读 · 0 评论 -
Flink之State状态编程
1.State分类State[ValueState、ReadOnlyBroadcastState、MapState、AppendingState]AppendingState[FoldingState、MergingState]MergingState[ListState、AggregatingState、ReducingState]在flink中,状态始终与特定算子相关联,像reduce、sum等算子都是默认带状态的,而map、flatmap本身时不带状态的,如果需要用到状态,可以自定义为了使原创 2022-02-12 18:17:06 · 1348 阅读 · 0 评论 -
flink教程_scala_01_Source
文章目录Sourcemaven1.Collection2.File3.Kafka4.UDFSource1.fromCollection2.File3.Kafka4.UDFmaven <dependencies> <dependency> <groupId>org.apache.flink</groupId> <artifactId>flink-scala_2.12&l原创 2021-12-06 22:58:14 · 214 阅读 · 0 评论