linux下kafka安装

准备事项

1. 安装Java JDK，我用的系统是centos7.4，JDK版本是1.8.0，就可以了，如果不是的，最好更新到Java8
2. 将对应的端口开发，我这里使用的是默认配置，所以打开的是2181和9092

安装zookeeper

1. 下载软件，下面是我的链接地址，也可以下载最新的
   1. http://mirror.bit.edu.cn/apache/zookeeper/zookeeper-3.5.6/apache-zookeeper-3.5.6.tar.gz
2. 解压缩到本地即可
3. 复制Conf下的zoo_sample.cfg，重命名为zoo.cfg，这个就是默认引用的配置文件
4. 修改配置文件中的信息
   1. dataDir：数据存储地址
   2. clientPort：启动端口，这里需要注意，linux下端口需要开放，否则可能会启动失败
5. 运行bin/zkServer.sh star启动

安装kafka

1. 下载软件，下面是我的链接地址，也可以下载最新的
   1. http://apache.01link.hk/kafka/2.3.1/kafka_2.12-2.3.1.tgz
2. 解压缩到本地即可

运行与测试

1. 运行zookeeper
   1. 可以使用kafka自带的，bin/zookeeper-server-start.sh config/zookeeper.properties
   2. 也可以使用自己安装的版本，启动命令同上
2. 运行kafka

bin/kafka-server-start.sh config/server.properties

3. 创建topic

bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic topicName
#localhost:2181 是zookeeper的IP和端口，具体可以根据安装调整，需要注意的是，如果修改这个端口，kafka的配置文件中的端口监听也需要修改
bin/kafka-topics.sh -list -zookeeper localhost:2181
#可以用这个命令查询当前的topic list

4. 使用

#建生产者
bin/kafka-console-producer.sh --broker-list localhost:9092 --topic topicName
#localhost:9092 是kafka的IP和端口，启动后需要一些等待时间，然后会出现>标志，就可以正常输入了。每输入一条信息，回车后输入下一条，ctrl+C中断输入
#创建消费者
bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic topicName --from-beginning
#可以看到名为topicName的队列的消息，生产者输入的信息，都会实时展示出来