kafka集群搭建

Kafka配置

tar xvf kafka_2.12-0.10.2.0.tar

vi config/server.properties:

broker.id=0   #每个服务器的broker.id应该不同
zookeeper.connect=192.168.70.103:2181,192.168.70.104:2181,192.168.70.105:2181

拷贝配置好后的kafka_2.12-0.10.2.0目录到每个要部署的服务器上，修改broker.id的值。

启动Kafka

在每个服务器上执行：

cd /opt/kafka_2.12-0.10.2.0/bin

./kafka-server-start.sh -daemon ../config/server.properties

执行 jps命令检查服务是否有Kafka进程已经启动

验证Kafka服务

#创建Topic
./kafka-topics.sh --create --zookeeper 192.168.70.103:2181,192.168.70.104:2181,192.168.70.105:2181 --replication-factor 2 --partitions 1 --topic yimingTest


#创建一个broker发布者
./kafka-console-producer.sh --broker-list 192.168.70.104:9092,192.168.70.105:9092,192.168.70.103:9092 --topic yimingTest

# 在另一台服务器上创建一个订阅者
./kafka-console-consumer.sh --bootstrap-server 192.168.70.103:2181,192.168.70.104:2181,192.168.70.105:2181 --topic yimingTest --from-beginning

#显示我们创建的所有topic
./kafka-topics.sh --list --zookeeper 192.168.70.103:2181,192.168.70.104:2181,192.168.70.105:2181

#显示topic详细信息
/kafka-topics.sh --describe --zookeeper 192.168.70.103:2181,192.168.70.104:2181,192.168.70.105:2181  --topic yimingTest

 

转载于:https://my.oschina.net/u/3430873/blog/887303