java使用kafka消费topic数据

本文通过代码实例展示了如何在Java环境中配置并消费Kafka的topic数据。首先介绍了环境准备,包括安装Kafka服务和创建测试topic。接着详细说明了在Java中设置消费端代码,强调了设置消费组的重要性。最后,通过运行生产者和消费者代码,验证了数据的正常发送与消费。
摘要由CSDN通过智能技术生成

前言

在之前的篇章中,我们探讨了关于kafka的生产端的相关理论知识,本篇结合代码来演示下,在java代码中,如何消费某个topic的数据

环境准备

1、提前安装好kafka服务(单机或集群均可)

2、提前创建一个测试使用的topic,本例创建了一个3分区3副本的 名称为“zcy234”的一个topic

代码演示

1、引入依赖

        <dependency>
            <groupId>org.apache.kafka</groupId>
            <artifactId>kafka-clients</artifactId>
            <version>3.0.0</version>
        </dependency>

2、生产端代码

创建一个生产者类,可以之直接使用之前的生产者发送的代码逻辑即可

import org.apache.kafka.clients.producer.KafkaProducer;
import org.apache.kafka.clients.producer.ProducerConfig;
im
  • 1
    点赞
  • 10
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 1
    评论
消费Kafka Topic数据可以使用Kafka Consumer API。下面是一个简单的Java代码示例: ```java import org.apache.kafka.clients.consumer.ConsumerRecords; import org.apache.kafka.clients.consumer.ConsumerRecord; import org.apache.kafka.clients.consumer.KafkaConsumer; import java.util.Properties; public class KafkaConsumerExample { public static void main(String[] args) throws Exception { String topicName = "test"; Properties props = new Properties(); props.put("bootstrap.servers", "localhost:9092"); props.put("group.id", "test-group"); props.put("key.deserializer", "org.apache.kafka.common.serialization.StringDeserializer"); props.put("value.deserializer", "org.apache.kafka.common.serialization.StringDeserializer"); KafkaConsumer<String, String> consumer = new KafkaConsumer<>(props); consumer.subscribe(Collections.singletonList(topicName)); while (true) { ConsumerRecords<String, String> records = consumer.poll(100); for (ConsumerRecord<String, String> record : records) { System.out.printf("offset = %d, key = %s, value = %s%n", record.offset(), record.key(), record.value()); } } } } ``` 在上面的代码中,首先创建了一个名为“test”的Topic消费者,然后订阅该Topic。接下来,使用while循环从Topic中轮询消息,然后遍历消息并打印出它们的偏移量、键和值。 注意:上述示例仅用于演示目的。在实际应用中,应该处理消费者异常,设置适当的配置参数,以及根据需要进行参数调整。
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

逆风飞翔的小叔

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值