qq_1149513559的博客

文章目录1. 生产中的kafka问题汇总1. 生产中的kafka问题汇总

文章目录1. Kafka核心总控制器Controller1.1 核心总控制器Controller的Leader选举1.2 Partition副本选举Leader机制1. Kafka核心总控制器Controller        在kafka集群中会有一个或者多个broker，其中有一个broker会被选举为控制器（Kafka Controller），它负责管理整个集群中所有分区和副本的状态。由于zookeeper中存储了k

文章目录1. kafka集群整体架构2. 单播消费和多播消费的概念2.1 消费组和偏移量1. kafka集群整体架构kafka集群整体运作如上图所示，来看一下kafka的相关术语名称解释Broker消息中间件处理节点，一个Kafka节点就是一个broker，一个或者多个Broker可以组成一个Kafka集群TopicTopicKafka根据topic对消息进行归类，发布到Kafka集群的每条消息都需要指定一个topicProducerProducer消息生产者

文章目录1. kafka单机安装2. kafka集群安装1. kafka单机安装安装jdk# 由于Kafka是用Scala语言开发的，运行在JVM上，# 因此在安装Kafka之前需要先安装JDK，如已安装请忽略yum install java‐1.8.0‐openjdk* ‐y安装zookeeper# 由于kafka依赖zookeeper，所以需要先安装zookeeper，如已安装请忽略wget https://mirror.bit.edu.cn/apache/zookeeper/zoo