kafka集群安装
1.下载Kafka安装包
2.上传安装包
3.解压
4.修改配置文件 config/server.properties
broker.id=0
host.name=主机名
log.dirs=/data/kafka
zookeeper.connect=master:2181,slave1:2181,slave2:2181
5.将配置好的kafka拷贝到其他机器上
6.修改broker.id和host.name
7.启动kafka(在bin目录下)
./kafka-server-start.sh -daemon ../config/server.properties
#查看topic信息(在bin目录下)
./kafka-topics.sh --list --zookeeper master:2181,slave1:2181,slave2:2181
#创建topic(在bin目录下)
./kafka-topics.sh --create --zookeeper master:2181,slave1:2181,slave2:2181 --replication-factor 3 --partitions 3 --topic junxi
#往Kafka的topic中写入数据(命令行的生成者)(在bin目录下)
./kafka-console-producer.sh --broker-list master:9092,slave1:9092,slave2:9092 --topic junxi
#启动消费者(在bin目录下),新版kafka
./kafka-console-consumer.sh --bootstrap-server master:9092,slave1:9092,slave2:9092 --topic junxi --from-beginning