kafka
文章平均质量分 94
许则则的大数据笔记
这个作者很懒,什么都没留下…
展开
-
Kafka 面试拷问 20 题
Kafka 面试拷问 20 题文章目录Kafka 面试拷问 20 题1. Kafka 基础2. Kafka 数据重复怎么解决3. Kafka 如何不丢失数据4. Kafka 数据积压怎么解决5. Kafka 的幂等和事务对比6. Kafka 常用的调优参数7. 如果 leader crash时,ISR为空怎么办?8. 机器资源评估9. Kafka 进行监控的工具10. 哪些场景你会选择Kafka?11. 如何实现 Kafka 全局有序12. 监控 Kafka 的框架都有哪些?13. Kafka中的分区器、原创 2021-02-02 20:55:56 · 160 阅读 · 0 评论 -
Kafka 如何实现 Exactly Once
流式系统中最重要的保证:Exactly Once,即消息不会丢失,也不会被重复发送在 Kafka 0.11 之前,开启重试机制只能保证数据不丢失,但是数据有可能有重复在 Kafka 0.11 之后,可以实现数据的精准一次,它能保证多条消息原子性地写入到目标分区,即要不一起成功,要不都失败主要靠两点:事务型 ProducerConsumer 只会成功提交的事务消息1. 事务型 Producer开启事务型 Producer 需要做以下 3 点:设置 enable.idempotence =原创 2020-12-10 23:36:28 · 624 阅读 · 0 评论