ubuntu安装kafka集群
配置3台虚拟机:
192.168.0.155 kafka1
192.168.0.154 kafka2
192.168.0.156 kafka3
第一步:安装JDK
ubuntu安装JDK
第二步:安装zookeeper集群
ubuntu安装zookeeper集群
第三步:安装kafka集群
3.1 下载kafka安装包(kafka_2.12-0.11.0.1.tgz为例)
3.2 上传到虚拟机的目录
3.3 解压kafka安装包
tar -zxvf kafka_2.12-0.11.0.1.tgz
3.4 解压好的文件夹复制到/usr/local目录下,并该改名为kafka
cp -r kafka_2.12-0.11.0.1 /usr/local
cd /usr/local
mv kafka_2.12-0.11.0.1 kafka
3.5 进入kafka目录,创建logs文件夹
cd kafka
mkdir logs
ls //查看是否创建logs文件夹
3.5 进入kafka中的config目录,修改server.properties
cd config
vim server.properties
主要修改内容:
broker.id
listeners
logs目录
zookeeper.connect
3.6 进入kafka目录启动kafka服务
cd /usr/local/kafka
bin/kafka-server-start.sh -daemon config/server.properties
jps(查看kafka启动)
3.7 topic相关操作
创建topic(192.168.0.155 kafka1)
bin/kafka-topics.sh --create --zookeeper 192.168.0.155:2181 --replication-factor 3 --partitions 1 --topic test
查询topic(192.168.0.154 kafka2)
bin/kafka-topics.sh --list --zookeeper 192.168.0.154:2181
创建生产者(192.168.0.154 kafka2)
bin/kafka-console-producer.sh --broker-list 192.168.0.154:9092 --topic test
创建消费者(192.168.0.156 kafka3)
bin/kafka-console-consumer.sh --zookeeper 192.168.0.156:2181 --topic test --from-beginning
或者下面的命令
bin/kafka-console-consumer.sh --bootstrap-server 192.168.0.156:9092 --topic test --from-beginning