Kafka
文章平均质量分 94
日常使用Kafka和未来可能的源码学习
ysy2025
这个作者很懒,什么都没留下…
展开
-
Kafka 笔记02
书接上文…2.6 提交和偏移量总结了一些概念,还有自己的一些理解.poll()方法!核心方法之一! 每次调用poll()方法,总返回由生产者写入 Kafka 但还没有被消费者读取过的记录.提交更新分区当前位置的操作,叫提交.比如,北京的城六区的GDP为10000e,当前处理了1000e;这个1000e就是偏移量,需要提交这个偏移量通知.再均衡假如广州GDP为20000e,当前处理了500e;如果消费者正常管理,就不需要care;但是如果有新消费者加入,比如曹操也想分一杯羹,那么,就要再均衡.原创 2021-03-11 17:49:53 · 206 阅读 · 0 评论 -
Kafka 笔记01
0 背景最近接手了几个接口的维护工作,涉及到Kafka的相关知识.于是我恶补了之前简单过了一遍的《Kafka权威指南》,结合我自己了解到的部门的Kafka情况,总结了一些知识点。个人感触是,结合实际,才能更好理解知识点。之前一味啃书,只能说囫囵吞枣;在实际中使用+review知识,让我对Kafka架构的了解更加深入。本篇只更新到消费者的配置部分,后续会继续不定期更新。1 生产者我们需要关注的:消息的丢失?消息的重复?消息的重复?延迟和吞吐量?1.1 生产者概览假如我们发送北京上海广州和西安的数据,原创 2021-03-10 19:14:24 · 96 阅读 · 0 评论