![](https://img-blog.csdnimg.cn/4cd1483adacc438aa367598365996955.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
Kafka
文章平均质量分 85
kafka学习笔记
海鸟不会飞
人生的成功不在于拿到一手好牌,而是要考虑怎么能把坏牌打好。
展开
-
Kafka环境搭建
Kafka只在partition的范围内保证消息消费的局部顺序性,不能在同一个topic中的多个partition中保证总的消费顺序性。consumer group中的consumer instance的数量不能比一个Topic中的partition的数量多,否则,多出来的consumer消费不到消息。leader处理所有的针对这个partition的读写请求,而followers被动复制leader的结果,不提供读写(主要是为了保证多副本数据与消费的一致性)也可以根据消息中的某一个关键字来进行区分。原创 2023-03-06 17:04:08 · 221 阅读 · 0 评论 -
Kafka入门基础
Kafka经常被用来记录web用户或者app用户的各种活动,如浏览网页、搜索、点击等活动,这些活动信息被各个服务器发布到kafka的topic中,然后订阅者通过订阅这些topic来做实时的监控分析,或者装载到hadoop、数据仓库中做离线分析和挖掘。用Kafka收集各种服务的日志,通过Kafka以统一服务接口的方式开放给各种consumer,如:Hadoop、Hbase、Solr等。Kafka根据topic对消息进行归类,发布到Kafka集群的每条消息都需要指定一个topic。Kafka的基本概念。原创 2023-03-06 14:18:14 · 47 阅读 · 0 评论