大数据面试专栏
文章平均质量分 82
我爱娃哈哈
这个作者很懒,什么都没留下…
展开
-
Kafka 消费者位置提交方式及适用场景
Kafka 消费者的位置提交方式有自动提交和手动提交两种,手动提交又分为同步提交和异步提交。不同的提交方式适用于不同的场景,开发者需要根据实际需求选择合适的提交方式。在选择提交方式时,需要考虑消息处理的准确性、性能要求以及应用场景的特点等因素。文章(专栏)将持续更新,欢迎关注公众号:服务端技术精选。。个人小工具程序上线啦,通过公众号(服务端技术精选)菜单【个人工具】即可体验,欢迎大家体验后提出优化意见!500 个访问欢迎大家踊跃体验哦~原创 2024-10-11 22:57:59 · 691 阅读 · 0 评论 -
Kafka 中的 ISR 和 OSR:理解它们的重要作用
Kafka 是一种高吞吐量的分布式发布订阅消息系统,被广泛应用于大数据处理、流数据处理等场景。它具有高可靠性、高可扩展性和高性能等特点,能够有效地处理大量的实时数据。原创 2024-10-11 22:47:25 · 461 阅读 · 0 评论 -
Kafka 的 Producer 如何实现幂等性
在数学中,幂等性是指一个操作执行多次与执行一次的效果相同。在分布式系统中,幂等性意味着对同一操作的多次重复执行不会产生额外的影响。对于 Kafka 的 Producer 来说,幂等性就是指发送同一条消息多次,Kafka 只会保存一份,不会出现重复消息。Kafka 的幂等性 Producer 为我们提供了一种可靠的消息发送机制,可以有效地避免消息重复发送带来的问题。通过设置合适的参数和处理异常情况,我们可以充分利用幂等性 Producer 的优势,提高系统的稳定性和可靠性。原创 2024-10-10 15:07:38 · 969 阅读 · 0 评论