springboot整合kafka

最新推荐文章于 2024-08-05 14:19:51 发布

Hao Tang

最新推荐文章于 2024-08-05 14:19:51 发布

阅读量398

点赞数

分类专栏： kafka 文章标签： springboot整合kafka

本文链接：https://blog.csdn.net/TangHao_0226/article/details/81132565

版权

kafka 专栏收录该内容

2 篇文章 0 订阅

订阅专栏

Kafka安装

Kafka需要依赖JAVA环境运行，如何安装JDK这里不做介绍。

下载kafka：

wget http://mirror.bit.edu.cn/apache/kafka/1.1.0/kafka_2.11-1.1.0.tgz

将包下载到执行目录并解压：

cd /usr/local/
tar -xzvf kafka_2.11-0.10.0.1.tgz

修改kafka配置文件：

cd kafka_2.11-0.10.0.1/config/

编辑配置文件

vi server.properties

broker.id=0
#端口号、记得开启端口，云服务器要开放安全组
port=9092
#服务器IP地址，修改为自己的服务器IP
#host.name=127.0.0.1
host.name=192.168.200.130
#zookeeper地址和端口， Kafka支持内置的Zookeeper和引用外部的Zookeeper
zookeeper.connect=localhost:2181
#非本地生产者和消费者访问Kafka，记得修改 config/server.properties中的listeners, 例如
listeners=PLAINTEXT://192.168.200.130:9092

分别启动 kafka 和 zookeeper：

./zookeeper-server-start.sh /usr/local/kafka_2.11-0.10.0.1/config/zookeeper.properties &
./kafka-server-start.sh /usr/local/kafka_2.11-0.10.0.1/config/server.properties &

后台启动方式:

./zookeeper-server-start.sh /usr/local/kafka_2.11-0.10.0.1/config/zookeeper.properties  1>/dev/null 2>&1 &
./kafka-server-start.sh /usr/local/kafka_2.11-0.10.0.1/config/server.properties  1>/dev/null 2>&1 &

SpringBoot集成

pom.xml引入：

<!--kafka支持-->
<dependency>
    <groupId>org.springframework.kafka</groupId>
    <artifactId>spring-kafka</artifactId>
    <version>1.3.5.RELEASE</version><!--$NO-MVN-MAN-VER$-->
</dependency>

application.properties配置：

#kafka相关配置
spring.kafka.bootstrap-servers=192.168.200.130:9092
#设置一个默认组
spring.kafka.consumer.group-id=0
#key-value序列化反序列化
spring.kafka.consumer.key-deserializer=org.apache.kafka.common.serialization.StringDeserializer
spring.kafka.consumer.value-deserializer=org.apache.kafka.common.serialization.StringDeserializer
spring.kafka.producer.key-serializer=org.apache.kafka.common.serialization.StringSerializer
spring.kafka.producer.value-serializer=org.apache.kafka.common.serialization.StringSerializer
#每次批量发送消息的数量
spring.kafka.producer.batch-size=65536
spring.kafka.producer.buffer-memory=524288

生产者KafkaSender：

/**
 * 生产者
 */
@RestController
@RequestMapping("/kafka")
public class KafkaSender {
    @Autowired
    private KafkaTemplate<String,String> kafkaTemplate;

    /**
     * 发送消息到kafka
     */
    @RequestMapping("/sendMs")
    public String sendMs(String message){
        kafkaTemplate.send("seckill","Hi Kafka!");
        return "消息发送成功!";
    }
}

消费者：

/**
 * 消费者 spring-kafka 2.0 + 依赖JDK8
 */
@Component
public class KafkaConsumer {
    /**
     * 监听seckill主题,有消息就读取
     * @param message
     */
    @KafkaListener(topics = {"seckill"})
    public void receiveMessage(String message){
        //收到通道的消息之后执行动作
        System.out.println("收到消息...."+message);
    }
}

启动服务 ,浏览器请求 http://localhost:8888/kafka/sendMs
浏览器返回:

消息发送成功!

控制台打印:

2018-07-20 14:58:48.891  INFO 6792 --- [nio-8888-exec-1] o.a.kafka.common.utils.AppInfoParser     : Kafka version : 0.11.0.2
2018-07-20 14:58:48.891  INFO 6792 --- [nio-8888-exec-1] o.a.kafka.common.utils.AppInfoParser     : Kafka commitId : 73be1e1168f91ee2
收到消息....Hi Kafka!