Flink基于Kafka-Connector 数据流容错回放机制
于 2019-01-21 22:35:00 首次发布
本文深入探讨了Flink基于Kafka-Connector的数据流容错回放机制,以及如何利用Kafka作为Flink的source和sink实现数据恢复。同时,回顾了Spark Streaming针对Kafka的使用技术,包括不同消费策略。此外,详细介绍了Flink Kafka Producer的容错配置,如设置LogFailuresOnly、FlushOnCheckpoint等,以实现至少一次或精确一次的语义。
摘要由CSDN通过智能技术生成