golang结合Kafka消息队列实践(二)

本文继续探讨使用Golang操作Kafka消息队列,重点介绍如何利用sarama-cluster库实现消费者组。示例代码展示了如何创建消费者并处理错误、重平衡通知,以及获取特定分区的offset。通过消费者组,Kafka能均衡分配partition,实现多消费者共享topic,具有发布订阅特性。
摘要由CSDN通过智能技术生成

上周分享了如何使用go来对kafka进行生产和消费,这周接着对kafka消息队列的一些特性来进行使用。 
上次讲到kafka有个consumer group的概念,而我们使用的sarama并没有支持,所以这次引入sarama-cluster项目 : go get “github.com/bsm/sarama-cluster”

producer的代码不变,参考上一篇文章,consumer的代码改为如下:

import KafkaCluster "github.com/bsm/sarama-cluster"

func KafkaConsumerCluster(consumerId string)  {

    brokers := []string{"182.61.9.153:6667","182.61.9.154:6667","182.61.9.155:6667"}
    topics := []string{"0612_test"}

    config := KafkaCluster.NewConfig()
    config.Consumer.Return.Errors = true
    config.Consumer.Offsets.CommitInterval=1*time.Second
    config.Consumer.Offsets.Initial=sarama.OffsetNewest
    config.Group.Return.Notifications = true

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值