Apache RocketMQ-Flink 项目推荐

Apache RocketMQ-Flink 项目推荐

rocketmq-flink RocketMQ integration for Apache Flink. This module includes the RocketMQ source and sink that allows a flink job to either write messages into a topic or read from topics in a flink job. 项目地址: https://gitcode.com/gh_mirrors/ro/rocketmq-flink

1. 项目基础介绍和主要编程语言

Apache RocketMQ-Flink 是一个开源项目，旨在将 Apache RocketMQ 与 Apache Flink 进行集成。该项目的主要编程语言是 Java，它充分利用了 Java 的强大功能和广泛的应用生态系统来实现 RocketMQ 和 Flink 之间的无缝集成。

2. 项目核心功能

RocketMQ-Flink 项目的主要功能包括：

• RocketMQ Source 和 Sink: 该项目提供了 RocketMQ 的 Source 和 Sink，允许 Flink 作业从 RocketMQ 读取消息或将消息写入 RocketMQ。
• Exactly-Once 可靠性保证: 当启用检查点时，RocketMQ Source 提供 Exactly-Once 的可靠性保证。
• At-Least-Once 可靠性保证: RocketMQ Sink 在启用检查点并设置 withBatchFlushOnCheckpoint(true) 时，提供 At-Least-Once 的可靠性保证。
• 动态属性支持: 支持在 Flink 作业中动态添加用户属性。

3. 项目最近更新的功能

最近更新的功能包括：

• 动态属性表 Sink: 增加了对动态属性表 Sink 的支持，允许用户在 Flink 作业中动态添加自定义属性。
• 性能优化: 对 RocketMQ Source 和 Sink 进行了性能优化，提高了数据处理效率。
• 错误处理增强: 增强了错误处理机制，确保在异常情况下能够更好地恢复和重试。

通过这些更新，RocketMQ-Flink 项目在功能和性能上都有了显著的提升，为用户提供了更加稳定和高效的 RocketMQ 与 Flink 集成解决方案。

rocketmq-flink RocketMQ integration for Apache Flink. This module includes the RocketMQ source and sink that allows a flink job to either write messages into a topic or read from topics in a flink job. 项目地址: https://gitcode.com/gh_mirrors/ro/rocketmq-flink