kafka主题支持路由功能

背景:

我们知道rabbitmq是支持消息路由的功能的,但是当我们统一消息中间件到kafka后,有一些旧的应用依然想要使用消息路由的功能时,我们可以怎么让kafka也支持消息路由的功能呢?

技术实现:

为了不影响kafka服务端,我们选择改造kafka的客户端,主要的想法是通过消息过滤的方式来达到消息路由的效果,怎么做呢,比如有两个消费者组消费同一个topic主题,每个消费者组只处理自己需要的消息,其他的消息统统丢弃掉.流程图类似下图所示:在这里插入图片描述
消费者组和要消费的消息的规则表达式可以从配置中心进行配置,这样运行的过程中可以动态修改消息的路由,那现在只要生产者发送消息到topic的时候把路由key放到header消息头中,这个方案就可以顺利做到使用kafka模拟rabbitmq的路由功能了.

方案缺点:

每个消费者组都会收到这个topic的所有的消息,会消耗很多的网络流量,并且消费者组越多,浪费的网络流量就越多.

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值