Cnetos7.5 安装Kafka及测试使用

一、检查是否安装JDK

java -version;

如下图表明已经安装JDK 

二、检查是否安装Zookeeper组件

三、从官网下载Kafka镜像

wget https://mirrors.tuna.tsinghua.edu.cn/apache/kafka/2.5.1/kafka_2.12-2.5.1.tgz

四、解压安装

tar zxvf kafka_2.11-2.0.0.tgz 

五、测试使用

1、先启动Zookeeper 服务

进入到Zookeeper的安装目录，使用下面命令启动即可。

./zkServer.sh start

2、启动Kafa服务；

在第四步解压后，进入到与bin同级目录，如下图所示，随后执行以下命令：

 bin/kafka-server-start.sh config/server.properties

3、命令行创建topic

bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic KafkaTest

4、查看topic创建是否成功

bin/kafka-topics.sh --list --zookeeper localhost:2181

下图显示了上述创建的KafkaTest topic 

5、生产消息

bin/kafka-console-producer.sh --broker-list localhost:9092 --topic KafkaTest

输入以下消息内容

5、消费消息

bin/kafka-console-consumer.sh --zookeeper localhost:2181 --topic KafkaTest --from-beginning

上述操作可能遇到如下问题：–zookeeper is not a recognized option

错误信息

由于新版本不支持-- zookeeper 命令，因此替换为--bootstrap-server

bin/kafka-console-consumer.sh --bootstrap-server localhost:8212 --topic KafkaTest --from-beginning

本来以为辛苦安装这么久，奇迹就要发生了，然鹅你会发现新大陆，各位看官请继续；居然是连接失败，只好使出绝招（百度大法）；搜索发现是端口号的问题，以前启动消费者的时候监听的端口是 2181，Kafka新版本改成了9092。

替换监听端口9092

bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic KafkaTest --from-beginning

 跌宕起伏，峰回路转，终于消费成功了。