kafka的基本使用

1.Kafka的架构

图片来自官网，架构如图所示，第一层为消息生产者，第二层为kafka集群，第三层为消息的消费者。

kafka的集群又由broker和topic组成，一个broker就相当于一个kafka，topic是相当于消息的标签，对应标签给对应的消费者消费。

2.kafka的启动

配置文件很重要，kafka的启动需要配置$KAFKA_HOME/config/server.properties

kafka-server-start.sh $KAFKA_HOME/config/server.properties根据配置文件启动kafka（先启动zookeeper）

3.topic的创建

kafka-topics.sh --create \

--zookeeper "你的localhost":2181 \

--replication-factor 1 \副本系数

--partitions 1 \ 分区

--topic hello_worldtopic的名称

4.查看所有topic

kafka-topics.sh --list --zookeeper “zookeeper的ip地址”:2181

5.发送消息

kafka-console-producer.sh --broker-list "你的localhost":9092 --topic hello_world

从这里发送的消息会被消费者消费。

6.消费消息

kafka-console-consumer.sh --zookeeper "你的localhost":2181 --topic hello_world --from-beginning

7.查看所有topic的详细信息

kafka-topics.sh --describe --zookeeper hadoop000:2181