一、MQ相关概念
1.什么是MQ?
MQ(message queue),本质上是个队列,遵循FIFO先进先出原则;
2.为什么要用MQ?
- 流量削峰
- 应用解耦
- 异步处理
3.MQ的分类?
- ActiveMQ
优点:单机吞吐量万级,时效性ms级,可用性高,基于主从架构实现高可用性,消息可靠性较低的概率丢失数据
缺点:官方对5.X版本维护越来越少,高吞吐量场景较少使用 - Kafka
大数据的杀手锏,这款为大数据而生的消息中间件,以其百万级TPS的吞吐量名声大噪,迅速称为大数据领域的宠儿,在数据采集,传输,存储的过程中发挥着举足轻重的作用;目前已被LinkedIN,Uber,Twitter,Netfox等大公司采纳;
优点:性能卓越,单机写入TPS约在百万条/秒,最大的优点,就是吞吐量;时效性ms级非常高,kafka是分布的,一个数据多个副本,少数机器宕机,不会丢失数据,不会导致不可用,消费者采用Pull的方式获取消息,消息有序,通过控制能够保证所有消息都被消费且仅被消费一次;有优秀的第三方kafka web管理界面kafka-manager;在日志领域比较成熟,被多家公司合多个开源项目使用;功能支持:功能较为简单,主要支持简单的mq功能,在大数据领域的实时计算以及日志采集被大规模使用;
缺点:kafka单机超过64个队列/分区,Load会发生明显的飙高现象,队列越多,load越高,发送消息响应时长变长,使用短轮询方式,实时性取决于轮询间隔时间,消费失败不支持重试;支持消息顺序,但是一台代理宕机后,就会产生消息乱序,社区更新慢; - RocketMQ
阿里的开源产品,用Java实现,在设计时参考了Kafka,并作出了自己的一些改进,被阿里广泛应用在订单,交易,重置,流计算,日志流式处理,binglog分布等场景;
优点:
缺点: - RabbitMQ
2007年发布,是一个在AMQP(高级消息队列协议)基础上完成的,可复用的企业消息系统,是当前最主流的消息中间件之一;
优点:由于erlang语言的高并发性,性能较好;吞吐量达到万级,MQ功能比较完备,健壮,稳定,易用,跨平台,支持多语言;如:Python、Ruby、.NET、Java、JMS、C、PHP、ActionScript、XMPP、STOMP等;支持AJAX文档齐全;开源提供的管理界面非常棒,社区活跃度高;更新频率相当高
缺点:商业版需付费,学习成本高
二、RabbitMQ
1.RabbitMQ的概念
RabbitMQ是一个消息中间件,接收,存储,并转发消息;
2.四大核心概念
- 生产者
- 交换机
- 队列
- 消费者
3.核心部分
- Hello World(简单模式)
- Work queues(工作模式)
- Publish/Subscribe(发布/订阅模式)
- Routing(路由模式)
- Topices(主题模式)
- Publisher Confirms