Kafka 的安装和使用

一、kafka 的下载，安装，配置

1. kafka的下载

 Apache Kafka

文档地址 Apache Kafka

2. 配置文件 （config 目录中）

        ① 配置 zookeeper.properties 

        ② 配置 server.properties

3. 启动 zookeeper server 

bin\windows\zookeeper-server-start.bat config\zookeeper.properties

4.启动 kafka server

bin\windows\kafka-server-start.bat config\server.properties

启动两个服务之后，在我们配置的文件中 会生成 数据。

二、kafka 的使用

1. 创建 topic (在bin\windows 目录中)

kafka-topics.bat --create --bootstrap-server localhost:9092 --replication-factor 1 --partitions 1 --topic test

        bootstrap-server 选择服务器 ： localhost:9092

        replication-factor 副本数量：1

        partitions 分区：1

        topic 主题 ：test

查看是否创建成功

kafka-topics.bat --list --bootstrap-server localhost:9092

2. 调用生产者命令 ，创建消息

kafka-console-producer.bat --broker-list localhost:9092 --topic test

3. 调用 消费者命令，获取消息

kafka-console-consumer.bat --bootstrap-server localhost:9092 --topic test --from-beginning

三、spring 整合 kafka

1. 添加依赖包到 项目中（pom.xml）

mvn 仓库

2. 在 application.properties 中配置 kafka

# kafka
spring.kafka.bootstrap-servers=localhost:9092
spring.kafka.consumer.group-id=nowcoder-consumer-group
# 是否自动提交偏移量 以及 自动提交的间隔
spring.kafka.consumer.enable-auto-commit=true
spring.kafka.consumer.auto-commit-interval=3000

3.测试 kafka 示例

package com.langchao.nowcoder;

import org.apache.kafka.clients.consumer.ConsumerRecord;
import org.junit.jupiter.api.Test;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.boot.test.context.SpringBootTest;
import org.springframework.kafka.annotation.KafkaListener;
import org.springframework.kafka.core.KafkaTemplate;
import org.springframework.stereotype.Component;
import org.springframework.test.context.ContextConfiguration;

/**
 * Description: KafkaTests
 *
 * @Author: qsk
 * @Create: 2023/8/25 - 11:43
 * @version: v1.0
 */

@SpringBootTest
@ContextConfiguration(classes = NowcoderApplication.class)
public class KafkaTests {

    @Autowired
    private KafkaProducer kafkaProducer;

    @Test
    public void testKafka(){
        kafkaProducer.sendMessage("test", "你好");
        kafkaProducer.sendMessage("test", "在吗");

        try {
            Thread.sleep(1000 * 20);
        } catch (InterruptedException e) {
            e.printStackTrace();
        }
    }
}

@Component
class KafkaProducer{
    @Autowired
    private KafkaTemplate kafkaTemplate;

    public void sendMessage(String topic, String content){
        kafkaTemplate.send(topic, content);
    }
}

@Component
class KafkaConsumer{

    @KafkaListener(topics = "test")
    public void handleMessage(ConsumerRecord record){
        System.out.println(record.value());
    }
}