springboot3集成kafka

最新推荐文章于 2024-05-01 23:43:02 发布

要乐观不要锁

最新推荐文章于 2024-05-01 23:43:02 发布

阅读量345

点赞数 8

文章标签： kafka 分布式 java spring idea

本文链接：https://blog.csdn.net/fangao_7/article/details/136950374

版权

本文详细介绍了如何在Docker中安装和配置Kafka，以及如何将其与Spring框架集成，包括设置Zookeeper连接、生产者和消费者配置，以及使用`KafkaTemplate`和`KafkaListener`进行消息的生产和消费。

摘要由CSDN通过智能技术生成

kafka安装，使用docker

基于zookeeper

拉取zookeeper

docker pull zookeeper:3.4.14

docker run -d --name zookeeper -p 2181:2181 zookeeper:3.4.14

拉取kafka

docker pull wurstmeister/kafka:2.12-2.3.1

创建容器

使用自己虚拟机的IP，kafka端口9092

docker run -d--name kafka \
--env KAFKA_ADVERTISED_H0ST_NAME=192.168.***.*** \
--env KAFKA_Z00KEEPER_C0NNECT=192.168.***.***:2181 \
--env KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://192.168.***.***9092 \
--env KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 \
--env KAFKA_HEAP_OPTS="-Xmx256M-Xms256M" \
--net=host wurstmeister/kafka:2.12-2.3.1

使用kafka

导入Spring-kafka依赖

<dependency>
    <groupId>org.springframework.kafka</groupId>
    <artifactId>spring-kafka</artifactId>
    <exclusions>
        <exclusion>
            <groupId>org.apache.kafka</groupId>
            <artifactId>kafka-clients</artifactId>
        </exclusion>
    </exclusions>
</dependency>
<dependency>
    <groupId>org.apache.kafka</groupId>
    <artifactId>kafka-clients</artifactId>
</dependency>
<dependency>
    <groupId>com.alibaba</groupId>
    <artifactId>fastjson</artifactId>
</dependency>

创建配置文件

spring:
  kafka:
    bootstrap-servers: localhost:9092
    producer:
      retries: 10
      key-serializer: org.apache.kafka.common.serialization.StringSerializer
      value-serializer: org.apache.kafka.common.serialization.StringSerializer
    consumer:
      group-id: test-hello-group
      key-deserializer: org.apache.kafka.common.serialization.StringDeserializer
      value-deserializer: org.apache.kafka.common.serialization.StringDeserializer

消息生产者

@Autowired
private KafkaTemplate<String,String> kafkaTemplate;

@GetMapping("/hello")
public String hello(){
    // 第一个参数：topics
    // 第二个参数：消息内容
    kafkaTemplate.send("kafka-hello","我是骚毛他大坝");
    // 如果参数为对象使用JSON转成JSON字符串发送消息 消费者使用JSON转成对象消费消息
    return "ok";
}

消息消费者

@Component
public class HelloListener{
    
    @KafkaListener(topics={"kafka-hello"})
    public void onMessage(String message){
        if(!StringUtils.isEmpty(message)){
            System.out.println(message);
        }
    }
}