kafka
JiuWeiYaoHo
我叫小阿卓
展开
-
python 操作kafka消费两条同样的数据问题
今天实验kafka的时候 生产者明明生产了一条数据 但是消费者消费了两条数据查了半天文档之类的还有思路回溯想想 原来是没加消费组 - - class MyHeartbeatConsumer(object): def __init__(self, app=None): self.app = None self.C_obj = None if app is not None: self.init_app(app) def init_app(self, app):原创 2021-08-18 16:53:14 · 471 阅读 · 0 评论 -
python 操作kafka笔记
Python操作kafka笔记 kafka模型 Producers 生产者 Consumers 消费者 Broker:kafka 集群 服务器用于存储消息 topic 主题 相当于库 生产者消费者链接不同的主题存放不同且不相干的数据 生产者与消费者规定那个主题(topic) 然后进行数据交互 topic 既然说topic(主题)类似与某个库,但是每个topic 又可拆成不同的partition(分区) 每个分区则由一条条消息组成,每条消息都会有下标(索引) 既然kafka为分布式存储, 那么好几原创 2021-07-12 14:57:04 · 254 阅读 · 0 评论