Mac安装Kafka以及Kafka基本命令

一、 kafka安装 (安装会依赖zookeeper)

brew install kafka # 安装目录：/usr/local/Cellar/kafka/2.1.0/ cd /usr/local/Cellar/kafka/2.1.0/

二、安装的配置文件位置如下

/usr/local/etc/kafka/server.properties /usr/local/etc/kafka/zookeeper.properties

三、启动zookeeper

cd /usr/local ./bin/zookeeper-server-start /usr/local/etc/kafka/zookeeper.properties &

四、启动kafka服务

kafka-server-start /usr/local/etc/kafka/server.properties &

五、创建并查看topic

# 创建topic, 使用单个分区和只有一个副本创建一个名为“test”的主题 kafka-topics --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test # 查看topic kafka-topics --list --zookeeper localhost:2181

六、生产消息

 

  运行生产者，然后在控制台中键入一些消息发送到服务器

./bin/kafka-console-producer --broker-list localhost:9092 --topic test

 

七、消费消息

./bin/kafka-console-consumer --bootstrap-server localhost:9092 --topic test --from-beginning

 

 

术语介绍

 点击此处展开...

术语	解释
Broker	Kafka集群包含一个或多个服务器，这种服务器被称为broker
Topic	每条发布到Kafka集群的消息都有一个类别，这个类别被称为Topic。（物理上不同Topic的消息分开存储，逻辑上一个Topic的消息虽然保存于一个或多个broker上但用户只需指定消息的Topic即可生产或消费数据而不必关心数据存于何处）
Partition	Partition是物理上的概念，每个Topic包含一个或多个Partition.
Producer	负责发布消息到Kafka broker
Consumer	消息消费者，向Kafka broker读取消息的客户端。
Consumer Group	每个Consumer属于一个特定的Consumer Group（可为每个Consumer指定group name，若不指定group name则属于默认的group）