golang使用sarama生产和消费kafka

最新推荐文章于 2025-03-09 19:16:38 发布

超级战斗王

最新推荐文章于 2025-03-09 19:16:38 发布

阅读量8.7k

点赞数 1

分类专栏： GoLang kafka

本文链接：https://blog.csdn.net/m0_38075425/article/details/109118809

版权

本文介绍了如何使用Golang的sarama库进行Kafka消息的消费和生产，涵盖了相关的基本操作和步骤。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

关于kafka相关架构及应用场景等，请见笔者相关文章。

1.消费kafka消息

package main

import (
	"fmt"
	"github.com/Shopify/sarama"
	cluster "github.com/bsm/sarama-cluster"
	"time"
)


var (
	kafkaConsumer *cluster.Consumer
	kafkaBrokers = []string{
   "127.0.0.1:9092"}
	kafkaTopic   = "test_topic_1"
	groupId = "csdn_test_1"
)

func init() {
   
	var err error
	config := cluster.NewConfig()
	config.Consumer.Return.Errors = true
	config.Group.Return.Notifications = true
	config.Consumer.Group.Rebalance.Strategy = sarama.BalanceStrategyRange
	config.Consumer.Offsets.Initial = -2
	config.Consumer.Offsets.CommitInterval = 1 * time.Second
	config.Group.Return.Notifications = true
	kafkaConsumer, err = cluster.NewConsumer(kafkaBrokers, groupId, []string{
   kafkaTopic}, con