三大主流消息队列Kafka、RabbitMQ、RocketMQ比较

最新推荐文章于 2024-09-26 08:32:07 发布

郑琨51

最新推荐文章于 2024-09-26 08:32:07 发布

阅读量1.5k

点赞数 1

分类专栏：分布式系统文章标签： kafka java 分布式队列

本文链接：https://blog.csdn.net/zhengkun51/article/details/111336532

版权

本文对比了三大主流消息队列——RocketMQ、Kafka和RabbitMQ。RocketMQ是阿里巴巴为非日志场景设计的，广泛应用于订单、交易等业务。Kafka以其高吞吐量和日志传输能力著称。RabbitMQ基于AMQP协议，适用于需要高一致性和可靠性的企业系统。测试结果显示，Kafka的吞吐量最高，RabbitMQ次之，且在消息持久化场景下性能下降明显。

摘要由CSDN通过智能技术生成

RocketMQ

淘宝内部的交易系统使用了淘宝自主研发的Notify 消息中间件，使用Mysql作为消息存储媒介，可完全水平扩容，为了进一步降低成本，我们认为存储部分可以进一步优化，2011 年初，Linkin 开源了Kafka 这个优秀的消息中间件，淘宝中间件团队在对Kafka做过充分Review之后，Kafka 无限消息堆积，高效的持久化速度吸引了我们，但是同时发现这个消息系统主要定位于日志传输，对于使用在淘宝交易、订单、充值等场景下还有诸多特性不满足，为此我们重新用 Java 语言编写了 RocketMQ，定位于非日志的可靠消息传输（日志场景也OK），目前RocketMQ在阿里集团被广泛应用在订单，交易，充值，流计算，消息推送，日志流式处理，binglog分发等场景。

Kafka

Kafka 是 LinkedIn 开源的分布式发布-订阅消息系统，目前归属于Apache 定级项目。Kafka 主要特点是基于Pull 的模式来处理消息消费，追求高吞吐量，一开始的目的就是用于日志收集和传输。0.8 版本开始支持复制，不支持事务，对消息的重复、丢失、错误没有严格要求，适合产生大量数据的互联网服务的数据收集业务。