kafka 通讯,监听消息

本文档描述了如何在WinForm应用中使用Kafka来监测图片上传后的分析进度。通过订阅消息,当分析完成后,系统将回传图片地址。文章探讨了在自动提交设置下遇到的问题,包括从头开始消费和最后一条消息未标记成功,并提出了临时解决方案。文中还展示了如何引入Confluent.Kafka库,并提供了配置及消费者代码示例,用于处理接收到的消息并更新UI。
摘要由CSDN通过智能技术生成

winfrom 使用kafka监测图片上传后分析的进度,通过订阅消息,将分析完成的图片地址回传,遇到的问题有:设置了自动提交,但消费了之后,用当前的topic再创建消费者去订阅,发现还是从一条开始消费的,后改为自动提交步长,又遇到最后一条未标记成功,临时解决的方案也是用逻辑数值控制第一条就忽略。

nuget 引用Confluent.Kafka 

配置

            DSPublic._ConsumerConfig = new ConsumerConfig
            {
                BootstrapServers = ConfigurationManager.AppSettings["kafkaUrl"],
                GroupId = CommonHelper.GetIPAddress(),
                EnableAutoCommit = false, //手动提交偏移量
                StatisticsIntervalMs = 5000,
                SessionTimeoutMs = 6000,
                EnableAutoOffsetStore = true,
                AutoOffsetReset = AutoOffsetReset.Latest,
                EnablePartitionEof = true,

            };

 

    private void MonitorMessage(object s)
        {
            Ca

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
在 Java 中使用 Kafka 监听消息需要使用 Kafka 的 Java 客户端 API。下面是一个简单的示例代码,可以监听指定 topic 的消息: ```java import org.apache.kafka.clients.consumer.ConsumerConfig; import org.apache.kafka.clients.consumer.ConsumerRecord; import org.apache.kafka.clients.consumer.ConsumerRecords; import org.apache.kafka.clients.consumer.KafkaConsumer; import org.apache.kafka.common.serialization.StringDeserializer; import java.util.Collections; import java.util.Properties; public class KafkaMessageListener { public static void main(String[] args) { Properties props = new Properties(); props.put(ConsumerConfig.BOOTSTRAP_SERVERS_CONFIG, "localhost:9092"); props.put(ConsumerConfig.GROUP_ID_CONFIG, "test-group"); props.put(ConsumerConfig.KEY_DESERIALIZER_CLASS_CONFIG, StringDeserializer.class.getName()); props.put(ConsumerConfig.VALUE_DESERIALIZER_CLASS_CONFIG, StringDeserializer.class.getName()); KafkaConsumer<String, String> consumer = new KafkaConsumer<>(props); consumer.subscribe(Collections.singletonList("test-topic")); while (true) { ConsumerRecords<String, String> records = consumer.poll(100); for (ConsumerRecord<String, String> record : records) { System.out.println("Received message: (" + record.key() + ", " + record.value() + ") at offset " + record.offset()); } } } } ``` 上面的代码中,创建了一个 KafkaConsumer 对象,并设置了相关的属性,然后调用 subscribe() 方法订阅指定的 topic。接着在一个循环中调用 poll() 方法来获取消息,然后遍历 ConsumerRecords 中的每一条消息,并处理它们。 需要注意的是,上面的代码只是一个简单示例,实际使用时需要根据具体的业务需求进行修改。另外,如果要保证消息的可靠性,还需要考虑使用事务、批量提交等机制。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值