Kafka源码解析之SocketServer，计算机vb编程语言

这就是因为对请求不区分优先级。

1 基本概念

=====================================================================

1.1 Data plane & Control plane

---

Data plane和Control plane的字面意思是数据面和控制面，各自对应数据类请求和控制类请求。

Kafka请求类型分为：

• 数据类请求

Data plane负责处理数据类请求

• 控制类请求

Control plane负责处理控制类请求

Controller与Broker交互的请求类型有如下种类：

• LeaderAndIsrRequest

• StopReplicaRequest

• UpdateMetadataRequest

都属控制类请求，通常应该被赋予高优先级，比如PRODUCE和FETCH请求。

SocketServer负责对这两大类请求区分处理。

1.2 监听器（Listener）

---

区分数据类请求和控制类请求不同处理方式的主要途径。即创建多组监听器分别执行数据类和控制类请求的处理。

• Kafka Broker端如下参数用以配置监听器

监听器定义为

EndPoint类

---

属性

• host

Broker主机名。

• port

Broker端口号。

• listenerName

监听器名称。目前预定义的名称包括

• PLAINTEXT

• SSL

• SASL_PLAINTEXT

• SASL_SSL

Kafka允许自定义其他监听器名称，比如CONTROLLER、INTERNAL。

• securityProtocol：监听器使用的安全协议。Kafka支持4种安全协议

• PLAINTEXT

• SSL

• SASL_PLAINTEXT

• SASL_SSL

Broker端参数

比如若Broker端参数配置如下：

配置3个监听器，分别是CONTROLLER、INTERNAL和EXTERNAL，使用的安全协议分别是PLAINTEXT、PLAINTEXT和SSL。

那SocketServer如何实现Data plane与Control plane分离的呢？

SocketServer

===========================================================================

属性

---

• 实现请求优先级相关的字段

对于Data plane，线程池的说法没有问题，因为Processor线程确实有很多，而Acceptor也可能多个，因为SocketServer会为每个EndPoint（每套监听器）创建一个对应的Acceptor线程。

但Control plane不同。

Control plane那组属性变量都是以Opt结尾的，即Option类型，完全可以不使用Control plane，即你可让Kafka不区分请求类型，2.2.0之前设计就是这样。

但一旦开启Control plane设置，其Processor线程和Acceptor线程都是1个。

它对应的RequestChannel里面的请求队列长度被硬编码成20，即控制类请求的数量应该远小于数据类请求，因而不需要为它创建线程池和较深的请求队列。

创建Data plane所需资源

===============================================================================

• 负责为Data plane创建所需资源

• 执行流程

• 最大连接数计数器将被用来确保没有配额超限的情形发生

• 创建Processor线程池。对于Data plane而言，线程池的数量由Broker端参数num.network.threads决定

• 将<监听器，Acceptor线程>对加入到Acceptor线程池统一管理

比如配置listeners=PLAINTEXT://localhost:9092, SSL://localhost:9093，默认会为PLAINTEXT和SSL监听器分别创建一个Acceptor线程和一个Processor线程池。

具体为哪些监听器创建依据配置而定，Kafka只会为Data plane所使的监听器创建这些资源。

自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。

深知大多数同学面临毕业设计项目选题时，很多人都会感到无从下手，尤其是对于计算机专业的学生来说，选择一个合适的题目尤为重要。因为毕业设计不仅是我们在大学四年学习的一个总结，更是展示自己能力的重要机会。

因此收集整理了一份《2024年计算机毕业设计项目大全》，初衷也很简单，就是希望能够帮助提高效率，同时减轻大家的负担。

既有Java、Web、PHP、也有C、小程序、Python等项目供你选择，真正体系化！

由于项目比较多，这里只是将部分目录截图出来，每个节点里面都包含素材文档、项目源码、讲解视频

如果你觉得这些内容对你有帮助，可以添加VX：vip1024c （备注项目大全获取）

img-YsvxNw9d-1712526658766)]

既有Java、Web、PHP、也有C、小程序、Python等项目供你选择，真正体系化！

由于项目比较多，这里只是将部分目录截图出来，每个节点里面都包含素材文档、项目源码、讲解视频

如果你觉得这些内容对你有帮助，可以添加VX：vip1024c （备注项目大全获取）
[外链图片转存中…(img-E6Q918Mx-1712526658766)]