linux环境下kafka安装

写于2019年5月21日15:47:10

linux环境下kafka安装

 

1、使用wget http://apache.01link.hk/kafka/2.1.1/kafka_2.12-2.1.1.tgz命令下载压缩包。

如果linux不能联网可使用其他机器打开url进行下载。

 

2、使用tar -xzf kafka_2.12-2.1.1.tgz命令解压，不出意外已经安装完成了。

 

3、启动kafka必须首先启动zookeeper。

 

4、移动到kafka安装目录启动kafka，bin/kafka-server-start.sh -daemon config/server.properties&，

&可以让kafka后台运行。

 

5、还是在kafka安装目录创建一个叫做test的topic，bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test

 

6、kafka的操作均需要在bin目录下，查看test topic注意你的zookeeper端口号（默认2181），

kafka中的zookeeper连接设置在config/server.properties，如果不是2181可以看一下。

bin/kafka-topics.sh -list -zookeeper localhost:2181

 

7、可以在一个终端启动生产者producer，另一个终端启动消费者consumer进行测试。

kafka的端口号可以在config/connect-distributed.properties中设置，默认9092。

启动生产者：bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test

启动消费者：bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning

生产者产生数据，消费者会接收到。