演示最简单的消息生产和消费demo
1.创建topic
使用kafka-topics.sh
这个脚本进行topic的创建,查看,修改等动作
- bootstrap-server: kafka服务端地址和端口
- create: 创建
- topic:指定topic名称
- partitions: 指定分区数量
- replication-factor:指定副本数量
创建:
./kafka-topics.sh --bootstrap-server 127.0.0.1:9092 --create --topic test1 --partitions 1 --replication-factor 1
查看topic:
#查看topic列表
./kafka-topics.sh --bootstrap-server 127.0.0.1:9092 --list
#查看某个topic详情(如分区数量,副本数量,leader是哪一个)
./kafka-topics.sh --bootstrap-server 127.0.0.1:9092 --topic test1 --describe
2.生产者发送数据
- topic: 指定数据投递到那个topic
./kafka-console-producer.sh --bootstrap-server 127.0.0.1:9092 --topic #{topicName}
3.消费者消费数据
- topic: 指定消费那个topic的数据
./kafka-console-consumer.sh --bootstrap-server 127.0.0.1:9092 --topic test1
通过命令行进行消息生产和投递还可以追加其他很多参数限制,例如:
- max-partition-memory-bytes:消息批处理大小(默认16k)
- message-send-max-retries: 投送消息到broker失败后最大重试次数啊
还有很多其它参数想,你可以通过脚本的--hlep
参数查看帮助