消息中间件学习笔记
郑泽凯
这个作者很懒,什么都没留下…
展开
-
Kafka学习笔记-- 2 持久化,Producer拦截器,Partitionor和调优参考
目录1Kafka持久化机制1.1 如何使用磁盘达到较高的吞吐量?1.2 写磁盘的过程2 Producer 拦截器3 Kafka Partitionor4 Kafka调优参考4.1 吞吐量4.2 延迟4.3 可用性5 Leader的选举1Kafka持久化机制Kafka数据存储目录由log.dirs参数配置。Kafka的消息数据是基于磁...原创 2019-06-21 12:02:18 · 252 阅读 · 0 评论 -
Kafka学习笔记-- 3 Kafka exactly once等 use case
目录1 exactly once的实现1 producer只生产了一次消息2 consumer 只消费了一次消息2 如何数据处理时间不可控, 因为长时间不poll导致consumer退出的问题?1 exactly once的实现exactly once是指消息不多不少, 只消费了一次。 与exactly once相对应的, 还有: at least once 消息最...原创 2019-06-21 12:02:23 · 113 阅读 · 0 评论 -
Kafka学习笔记-- 1 入门知识和使用场景
目录1 Kafka入门1.1 主流mq框架对比1.2 kafka主要特性1.3 AMQP协议1.4 Kafka整体架构1.5 核心概念brokertopicpartitionrecordreplication1.6 kafaka 核心API概述producerconsumer3 consumer的commit offset...原创 2019-06-21 12:02:14 · 322 阅读 · 0 评论