kafka单机安装部署cnetos7
kafka单机环境搭建及使用
环境搭建
(1) 解压kafka_2.12-2.2.0.tgz,得到“kafka_2.12-2.2.0”文件夹
(2) kafka需要安装zookee使用,但kafka集成zookeeper,在单机搭建时可直接使用。使用需配置./config 下的“zookeeper.properties”
修改dataDir和clientPort。前者是快照存放地址(自己随意配置,我这里没改),后者是客户端连接zookeeper服务的端口(默认是2181)
(3) 配置./config下的“server.properties”,修改log.dirs和zookeeper.connect。前者是日志存放文件夹,后者是zookeeper连接地址(端口和clientPort保持一致)
单机测试
开启zookeeper
(开启kafka自带的zookeeper)
前台运行:
bin/zookeeper-server-start.sh config/zookeeper.properties
后台运行:
nohup bin/zookeeper-server-start.sh config/zookeeper.properties > zookeeper-run.log 2>&1 &
开启kafka
前台运行:
bin/kafka-server-start.sh config/server.properties
后台运行:
nohup bin/kafka-server-start.sh config/server.properties > kafka-run.log 2>&1 &
创建kafka主题
bin/kafka-topics.sh --create --zookeeper 127.0.0.1:2181 --replication-factor 1 --partitions 1 --topic test
创建成功显示如下:Created topic test
显示kafka所有主题:
bin/kafka-topics.sh -list -zookeeper 127.0.0.1:2181
创建kafka生产者
bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test
创建kafka消费者
另起一个终端,仍在相同目录下运行“创建kafka消费者”的命令。消费者会收到生产者发来的消息。如图,我接收到了之前发的的消息
bin/kafka-console-consumer.sh --bootstrap-server 127.0.0.1:9092 --topic test --from-beginning
关闭kafka
bin/kafka-server-stop.sh
解释:
zookeeper:后面接的是你配置的zookeeper地址
broker-list:默认端口为9092.可自行更改