go kafka group

最新推荐文章于 2024-07-30 21:53:36 发布

dz45693

最新推荐文章于 2024-07-30 21:53:36 发布

阅读量2.7k

点赞数

分类专栏： GO MQ 文章标签： kafka golang 分布式

本文链接：https://blog.csdn.net/ma_jiang/article/details/114881970

版权

本文介绍如何在Go中使用sarama-cluster库处理Kafka的Group消费问题。由于sarama自身不支持Group概念，因此需要借助sarama-cluster。在实际使用中要注意sarama版本兼容性，避免出现非正向间隔错误。文中提供了测试代码示例及运行结果，并推荐了sarama-cluster的相关资源。

摘要由CSDN通过智能技术生成

在以前的文章kafka初探go和C#的实现里面我们用了sarama来消费kafka的消息，但是很遗憾它没有group的概念。没办法我们只能用sarama-cluster来实现，注意sarama版本不要太新否则有错误panic: non-positive interval for NewTicker 问题处理，建议大家可以修改go.mod文件如下：

require (
	github.com/Shopify/sarama v1.24.1
	github.com/bsm/sarama-cluster v2.1.15+incompatible
)

测试代码如下：

papackage main

import (
	"context"
	"fmt"
	"log"
	"os"
	"os/signal"
	_ "regexp"
	"time"

	"github.com/Shopify/sarama"
	cluster "github.com/bsm/sarama-cluster"
)

var Address = []string{"192.168.100.30:9092"}
var Topic = "gavintest"

//panic: non-positive interval for NewTicker
// 修改go.mod
//github.com/Shopify/sarama v1.24.1
// github.com/bsm/sarama-cluster v2.1.15+incompatible
//修改
/**
  消费者
*/
func main() {
	go syncConsumer(