消息队列
文章平均质量分 52
明星it
这个作者很懒,什么都没留下…
展开
-
kafka中zookeeper的作用
Kafka使用zk的分布式协调服务,将生产者,消费者,消息储存(broker,用于存储信息,消息读写等)结合在一起。同时借助zk,kafka能够将生产者,消费者和broker在内的所有组件在无状态的条件下建立起生产者和消费者的订阅关系,实现生产者的负载均衡。1. broker在zk中注册kafka的每个broker(相当于一个节点,相当于一个机器)在启动时,都会在zk中注册,告诉zk其br...原创 2019-12-05 17:35:05 · 1441 阅读 · 0 评论 -
kafka的groupid
设置消费者properties的两个参数consumer.group.idproperties.setProperty("auto.offset.reset", "earliest”) // latest注意:只要不更改group.id,每次重新消费kafka,都是从上次消费结束的地方继续开始,不论"auto.offset.reset”属性设置的是什么场景一:Kafka上...转载 2019-12-05 16:48:26 · 37428 阅读 · 3 评论 -
Kafka分区与消费者个数之间的关系
1. 前言我们知道,生产者发送消息到主题,消费者订阅主题(以消费者组的名义订阅),而主题下是分区,消息是存储在分区中的,所以事实上生产者发送消息到分区,消费者则从分区读取消息,那么,这里问题来了,生产者将消息投递到哪个分区?消费者组中的消费者实例之间是怎么分配分区的呢?接下来,就围绕着这两个问题一探究竟。2. 主题的分区数设置在server.properties配置文件中可以指定一...转载 2019-12-05 16:41:51 · 8176 阅读 · 1 评论 -
kafka常见问题
kafka常见问题转载 2016-08-09 14:08:11 · 15514 阅读 · 0 评论 -
kafka经典教程
读过的关于kafka的很好的一篇文章,文章覆盖面很全,可以让你迅速熟悉kafka转载 2017-03-07 13:40:57 · 415 阅读 · 0 评论