Flink
huo_火力全开
吃得苦中苦,方位人上人
展开
-
Flink调优-分区器策略
控制数据流向在流进行转换操作后,Flink通过分区器来精确得控制数据流向。Flink分区 器如下图1.随机分区器 ShufflePartitioner根据均匀分布对元素进行随机划分@Internalpublic class ShufflePartitioner<T> extends StreamPartitioner<T> { private stati...原创 2020-02-20 18:40:07 · 1240 阅读 · 0 评论 -
Flink之CheckPoint 构建 真正的End-to-End Exactly-Once
Caused by: java.lang.Exception: Could not complete snapshot 32 for operator Source: Custom Source -> Sink: MySqlTwoPhaseCommitSink (1/1). at org.apache.flink.streaming.api.operators.AbstractStreamOperator.snapshotState(AbstractStreamOperator.java:422) at原创 2020-02-08 16:12:11 · 1240 阅读 · 0 评论 -
Flink 本地环境 使用scala/Java 分别 编写Demo
Flink 本地环境 Demo分别使用scala和java编写原创 2018-11-16 17:08:29 · 11339 阅读 · 2 评论