安装和启动基本命令
安装jdk和zookeeper和kafka
- 安装jdk,配置环境变量
- 下载解压zookeeper之后,打开conf目录,将zoo_sample.cfg修改为zoo.cfg
只需要修改dataDir和dataLofDir,配置数据目录和日志目录,端口也可以修改,clientPort - 启动Zookeeper命令
bin/zkServer.sh start
- 下载解压kafka之后,在config目录下面修改部分参数,
- broker_id = 0 :表示broker的编号,如果集群中有多个brker,则每个broker的编号需要设置的不同
- listeners= PLAINTEXT://9092 :broker对外提供的服务入口地址
- log.dirs=/temp/kafka/log:设置存放消息日志文件的地址
- zookeeper.connect=localhost:2181:kafka所需Zookeeper集群地址,
kafka测试消息生产和消费
- 创建主题
–zookeeper:指定了kafka所连接的zookeeper服务地址
– topic:指定所要创建主题的名称
– partitions:指定分区个数
– replication-factor:指定了副本因子
–create:创建主题的动作指定
bin/kafka-topics.sh --zookeeper localhost:2181 --create --topic topicName
-- partition partitionNumber --replication-factor 1
- 展示所有主题
bin/kafka-topics.sh --zookeeper localhost:2181 --list
- 查看主题详情
bin/kafka-topics.sh --zokeeper localhost:2181 --describe --topic topicName
- 启动消费端接受消息
– boostrap-server:指定了连接kafka集群的地址
– topic :指定了消费端订阅的主题
bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic topicName
- 生产端发送消息
–broker-list 指定了连接的kafka集群地址
– topic:指定发送消息的主题
/bin/kafka-console-producer.sh --broker-list localhost:9092 --topic topicName