kafka的下载安装与配置测试
一、安装JDK
过程:略
打开cmd输入如下内容,则表示安装成功
二、安装zookeeper
官方下载地址:http://zookeeper.apache.org/releases.html#download
本文zookeeper3.5.5版本下载链接: zookeeper3.5.5 提取码: 5dye
(1)配置环境变量
1.创建ZOOKEEPER_HOME,值为ZOOKEEPER安装路径
2.在Path后面添加 ;%ZOOKEEPER_HOME%\bin;
(2)进入Zookeeper配置
将“zoo_sample.cfg”重命名为“zoo.cfg”,并用编辑器打开zoo.cfg
注:data文件夹为输入自动创建文件夹,添加的serverport端口8093随意,避免默认8080端口与其他端口冲突
(三)zookeeper运行测试
地址栏输入cmd,在DOS窗口里输入zkServer回车,显示以下内容则为zookeeper打开成功
三、安装与运行Kafka
官方下载地址:http://kafka.apache.org/downloads.html
本文kafka2.11-1.1.0版本下载链接: kafka2.11-1.1.0 提取码: n83y
(1)进入kafka配置
进入Kafka配置目录,编辑文件“server.properties”找到并编辑log.dirs=D:/kafka_2.11-1.1.0/kafka-logs.zookeeper.connect=localhost:2181。表示本地运行
Kafka会按照默认,在9092端口上运行,并连接zookeeper的默认端口:2181。
(2)kafka运行测试
按上方Zookeeper打开方式并保持窗口不关闭,进入Kafka安装目录D:\kafka_2.11-1.1.0,在地址栏输入CMD,在dos窗口里输入
.\bin\windows\kafka-server-start.bat .\config\server.properties
出现选框信息及下方日志信息列表则打开成功
问题:
[Kafka][错误: 找不到或无法加载主类 Files\Java\jdk1.8.0_101\lib\dt.jar;C:\Program]
1、CLASSPATH配置有误,应该是:.;%JAVA_HOME%\lib\dt.jar;%JAVA_HOME%\lib\tools.jar; 最前面是“小数点”不是“逗号”。
2、java环境由JRE换成JDK的话,需要修改kafka_2.11-1.1.0\bin\windows\kafka-run-class.bat文件。
具体修改内容是 %CLASSPATH%要用双引号。
四、运行测试
保持上方的zookeeper和和kafka一直打开
(1)创建主题topic
进入Kafka安装目录D:\kafka_2.11-1.1.0 打开dos窗口输入
.\bin\windows\kafka-topics.bat --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic abc
注:abc为自定义创建topic的名字
(2)查看主题topic
DOS窗口输入:
.\bin\windows\kafka-topics.bat --list --zookeeper localhost:2181
(3)创建生产者producer
DOS窗口输入:
.\bin\windows\kafka-console-producer.bat --broker-list localhost:9092 --topic abc
创建成功后输入hello world!
(4)创建消费者consumer
DOS窗口输入:
.\bin\windows\kafka-console-consumer.bat --bootstrap-server localhost:9092 --topic abc --from-beginning
成功后即可看到生产者发送的消息,即表示kafka配置成功