windows上安装运行zookeeper和kafka

【win10安装Kafka发消息及消费】_Zxdwr520的博客-CSDN博客_windows消费kafka

一、下载安装并配置JDK

1

1）Zookeeper是用Java编写的，运行在Java环境上，因此在部署ZooKeeper的机器上需要安装Java运行环境。
2）安装JDK，从Oracle的Java网站下载，注意选择相应系统。
Download the Latest Java LTS Free 选择x64 Installer。
3）下载完毕后双击.exe文件开始安装，可以选择合适的位置进行安装。

2 jdk安装完成以后没有jre
解决办法：
1）右击cmd以管理员身份打开。
2）进入jdk18的安装路径。
bin\jlink.exe --module-path jmods --add-modules java.desktop --output jre
3）安装完成。

3、设置系统变量
1）点击新建添加变量CLASSPATH，值为
.;%JAVA_HOME%\lib;%JAVA_HOME%\lib\tools.jar
2） 新增变量JAVA_HOME，值为D:\Java\jdk1.8.0_311（安装路径）

 

3）PATH变量点开编辑，新增俩个值%JAVA_HOME%\bin 和%JAVA_HOME%\jre\bin

二、下载Zookeeper

Apache Downloads
1）带有bin标识的包才是我们想要的下载可以直接使用的里面有编译后的二进制的包，而之前的普通的tar.gz的包里面是只是源码的包是无法直接使用的。所以这里要下载带bin标识的。
2）解压到常用的安装目录。
3）将conf目录下的zoo_sample.cfg文件，复制一份，重命名为zoo.cfg。

4）修改zoo.cfg配置文件，将dataDir=/tmp/zookeeper修改成zookeeper安装目录所在的data文件夹（在安装目录下面新建一个空的data文件夹和log文件夹），再添加一条添加数据日志的配置。

 

注意：此处的路径一定要使用双斜杠" \\ "

三、启动zookeeper

 1.添加环境变量

   ZOOKEEPER_HOME          D:\Program Files\zookeeper-3.5.2-alpha
   Path 在现有的值后面添加     ;%ZOOKEEPER_HOME%\bin;

2.打开cmd，运行Zookeeper---zkserver

四、安装Kafka

1.Kafka下载路径  http://kafka.apache.org/downloads

2.解压文件（我的目录是D:\kafka_2.12-0.11.0.0   【这里不要在Program Files等文件名之间有空格的目录下，不然一会执行会不识别路径】）

3.打开目录D:\kafka_2.12-0.11.0.0\config下server.properties文件，把log.dirs修改为【log.dirs=D:\kafka_2.12-0.11.0.0\kafka-logs】

4.进入kafka文件目录D:\kafka_2.12-0.11.0.0，执行以下命令，启动kafka通讯的服务器broker

.\bin\windows\kafka-server-start.bat .\config\server.properties

5.进入kafka文件目录D:\kafka_2.12-0.11.0.0\bin\windows，创建kafka的消息topics

kafka-topics.bat --create --bootstrap-server localhost:9092 --replication-factor 1 --partitions 1 --topic testDemo

新版命令
kafka-topics.bat --create --topic test--bootstrap-server localhost:9092

6.分别打开两个cmd窗口，进入目录D:\kafka_2.12-0.11.0.0\bin\windows，创建Producer和Consumer

（1）Producer

进入目录D:\kafka_2.12-0.11.0.0\bin\windows输入如下命令

kafka-console-producer.bat --broker-list localhost:9092 --topic testDemo

（2）Consumer

进入目录D:\kafka_2.12-0.11.0.0\bin\windows输入如下命令

kafka-console-consumer.bat --zookeeper localhost:2181 --topic testDemo --from-beginning


kafka-console-consumer.bat --bootstrap-server localhost:9092 --topic test --from-beginning

（3）列出所有的topic

E:\apps\kafka\kafka_2.13-3.3.1>.\bin\windows\kafka-topics.bat --list --bootstrap-server localhost:9092

查看topic列表

D:\kafka\kafka_2.13-3.2.0\bin\windows> kafka-topics.bat --list --bootstrap-server localhost:9092

删除topic

kafka-topics.bat --delete --bootstrap-server localhost:9092 --topic ceshiTopic

 

查看kafka指定TOPIC的详情

kafka-topics.bat --bootstrap-server localhost:9092 --topic datasync --describe

查看消费组列表

D:\kafka\kafka_2.13-3.2.0\bin\windows>kafka-consumer-groups.bat --bootstrap-server 127.0.0.1:9092 --list

查看消费组详情

kafka-consumer-groups.bat  -bootstrap-server 127.0.0.1:9092 --group g_k --describe

查看指定消费组消费情况查看

kafka-consumer-groups.bat --describe --bootstrap-server 127.0.0.1:9092 --group g_k

查看所有消费组消费情况

kafka-consumer-groups.bat --describe --bootstrap-server 127.0.0.1:9092 --all-groups

2.4版本kafka消费者命令

kafka-console-consumer.bat --bootstrap-server localhost:9092 --topic testDemo --from-beginning
然后就可以在Producer中发信息，在Consumer中收信息了