docker安装zookeeper、Kafka步骤

提示：默认你已经安装docker。

安装步骤：

先安装zookeeper。

1. 拉取zookeeper镜像

docker pull zookeeper:3.6

2.拉去Kafka镜像

docker pull wurstmeister/kafka:2.13-2.8.1

3. 创建网络

docker network create my-network

4. 启动zookeeper容器

docker run -d --name zookeeper --network my-network -p 2181:2181 zookeeper:3.6

5.启动kafka容器

docker run -d --name kafka --network my-network \
-e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 \
-e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://localhost:9092 \
-e KAFKA_ZOOKEEPER_CONNECT=zookeeper:2181 \
-e KAFKA_AUTO_CREATE_TOPICS_ENABLE=false \
-p 9092:9092 wurstmeister/kafka:2.13-2.8.1

注释：localhost可填写可更换为自己安装虚拟机的IP地址
7. Springboot项目中的配置文件

spring.kafka.bootstrap-servers=localhost:9092
spring.kafka.consumer.group-id=my-group

在SpringBoot项目中使用kafka。

1. 配置文件application.properties：

spring.kafka.bootstrap-servers=192.168.204.130:9092
spring.kafka.consumer.group-id=my-group

1. 依赖文件pom.xml

    <dependencies>
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter</artifactId>
        </dependency>
        <dependency>
            <groupId>org.springframework.kafka</groupId>
            <artifactId>spring-kafka</artifactId>
        </dependency>
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-web</artifactId>
        </dependency>
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-test</artifactId>
            <scope>test</scope>
        </dependency>
        <dependency>
            <groupId>org.springframework.kafka</groupId>
            <artifactId>spring-kafka-test</artifactId>
            <scope>test</scope>
        </dependency>
    </dependencies>

3. 控制层添加controller

import com.zgd.service.KafkaProducer;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.web.bind.annotation.GetMapping;
import org.springframework.web.bind.annotation.RequestMapping;
import org.springframework.web.bind.annotation.RestController;

@RestController
@RequestMapping("/kafka")
public class KafkaController {

    private final KafkaProducer kafkaProducer;

    @Autowired
    public KafkaController(KafkaProducer kafkaProducer) {
        this.kafkaProducer = kafkaProducer;
    }

    @GetMapping("/send")
    public String sendMessage() {
        kafkaProducer.sendMessage("test-topic", "Hello, Kafka!");
        return "Message sent to Kafka.";
    }
}

个人新建项目的包名不一样，直接复制代码之后换成自己的路径就行。
4. 新建service层次

新建KafkaConsumer 类

import org.apache.kafka.clients.consumer.ConsumerRecord;
import org.springframework.kafka.annotation.KafkaListener;
import org.springframework.stereotype.Service;

@Service
public class KafkaConsumer {

    @KafkaListener(topics = "test-topic")
    public void listen(ConsumerRecord<String, String> record) {
        System.out.println("Received Message: " + record.value());
    }
}

新建KafkaProducer 类
@Service
public class KafkaProducer {

private final KafkaTemplate<String, String> kafkaTemplate;

@Autowired
public KafkaProducer(KafkaTemplate<String, String> kafkaTemplate) {
    this.kafkaTemplate = kafkaTemplate;
}

public void sendMessage(String topic, String message) {
    kafkaTemplate.send(topic, message);
}

}

注释，代码中我使用的topic是test-topic，这是我已经新建好的。必须先建立topic，否则项目启动报错。
以下步骤是新建topic

要使用 Docker 创建 Kafka 主题，您可以通过在运行 Kafka 容器的命令中包含 kafka-topics.sh 来执行创建主题的命令。以下是一个示例：

docker exec -it <your_kafka_container_id_or_name> kafka-topics.sh --create --topic test-topic --bootstrap-server localhost:9092 --partitions 1 --replication-factor 1

请注意替换 <your_kafka_container_id_or_name> 为您实际的 Kafka 容器的ID或名称。这个命令的参数解释与前面提到的相同：

• --create: 表示创建一个新的主题。
• --topic test-topic: 新主题的名称是 test-topic。
• --bootstrap-server localhost:9092: Kafka 集群的引导服务器地址。
• --partitions 1: 主题的分区数为 1。
• --replication-factor 1: 主题的副本因子为 1。
  这里的localhost要和之前的保持一致
  通过运行此命令，您将在 Kafka 中创建一个名为 test-topic 的主题。