安装运行kafka

window下安装

下载

官网 https://kafka.apache.org/downloads

Kafka安装目录下新建目录logs

修改Kafka配置文件 server.properties

文件路径：D:\bigdata\kafka\2.12-3.5.1\config\server.properties

修改 log.dirs 参数

修改 log.dirs 参数值，修改成上一步新建的logs文件夹。注意文件夹路径中是双左斜杠

log.dirs=D:\\bigdata\\kafka\\2.12-3.5.1\\logs
1

修改 listeners 参数

修改 listeners 参数值，修改成上一步新建的logs文件夹。

listeners=PLAINTEXT://localhost:9092
1

Kafka启动

由于Kafka依赖于Zookeeper，所以要先启动Zookeeper，再启动Kafka。

先启动Zookeeper服务

管理员权限打开命令窗口，输入命令zkServer，启动Zookeeper服务：

zkServer

显示如下信息，则表示Zookeeper服务正常运行：

再启动Kafka服务

管理员权限打开命令窗口，进入到Kafka安装目录（D:\bigdata\kafka\2.12-3.5.1）。
输入如下命令启动Kafka服务：

.\bin\windows\kafka-server-start.bat .\config\server.properties

显示如下信息，则表示Kafka服务正常运行：

Kafka相关操作（Kafka新版本命令）

Kafka2.2之后版本中使用–zookeeper hadoop01:2181会出现报错情况，2.2之后的版本使用了–bootstrap-server hadoop01:9092来替换–zookeeper hadoop01:2181

创建topics

以管理员权限新开一个命令提示窗口，进入D:\bigdata\kafka\2.123.5.1\bin\windows目录，执行以下命令，创建topics：

kafka-topics.bat --create --bootstrap-server localhost:9092 --replication-factor 1 --partitions 1 --topic test

打开一个producer（生产者）

以管理员权限新开一个命令提示窗口，

进入D:\bigdata\kafka\2.12-3.5.1\bin\windows目录，

执行以下命令，打开一个producer（生产者）：

kafka-console-producer.bat --broker-list localhost:9092 --topic test

打开一个consumer（消费者）

以管理员权限新开一个命令提示窗口，进入D:\bigdata\kafka\2.12-3.5.1\bin\windows目录，执行以下命令，打开一个consumer（消费者）：

kafka-console-consumer.bat --bootstrap-server localhost:9092 --topic test --from-beginning