安装kafka

安装kafka

1.kafka是什么

Kafka是一个分布式的流处理平台，由Apache软件基金会开发。它最初是由LinkedIn开发，用于处理LinkedIn的大量数据流。Kafka可以处理大量的实时数据流，是一个高性能、低延迟的平台。Kafka是一个分布式的、可分区、可复制的消息系统，它通过ZooKeeper来维护集群中的节点信息。Kafka的数据模型基于消息和主题（Topic），它允许多个生产者向同一个主题发送消息，并且允许多个消费者从同一个主题订阅消息。Kafka的应用场景非常广泛，包括日志处理、事件处理、消息队列等。

2.下载命令

可以参考我的本机环境

安装适用于 Python 3.7 和 PySpark 3.3.2 的 kafka-python 包

pip install kafka-python==2.0.2