消息队列

一、功能

• 削峰

与限流不同，限流是超出部分不处理，削峰是等会再处理，应对潮汐

链路太长，影响接口性能，对一致性要求不高的操作可以使用job异步完成

• 解藕服务
• 分布式系统的异步
• 采集日志
• 消息传递

二、实现

	Kafka	RocketMQ	RabbitMQ	ActiveMQ
单机吞吐量	10万级	10万级	万级	万级
开发语言	Scala	Java	Erlang	Java
高可用	分布式架构	分布式架构	主从架构	主从架构
性能	ms级	ms级	us级	us级
功能	只支持主要MQ功能	顺序消息、事物消息等功能完善	并发性强、性能好、延时低	成熟的社区产品、文档丰富

三、可靠性

1. 生产者丢失

生产者没有发送成功 or MQ没收到消息

• 同步发送 不会丢失
• 异步发送 使用回调通知 + 本地消息列表
  数据库保存mq消息（同步），异步将mq发送，发送成功就更新数据库状态，失败就重试，多次失败报警

2. MQ丢失

在内存中的mq因为宕机丢失

• Kafka
• RocketMQ
  通过同步刷盘或异步刷盘（默认）的方式，将mq写入磁盘

3. 消费者丢失

消费者拿到mq未执行时，消费者宕机

• Kafka
• RocketMQ

四、基本概念

1. 消息模型

• 点对点：生产者发送消息到queue 一个消息只能被一个消费者消费
• 发布订阅：生产者发送消息到topic 被所有订阅的的消费者消费 RocketMQ

2. 推拉模式

• pull：消费者轮询拉去消息 kafka
  • 缺乏实时性
  • 有反馈机制
• push：消息队列主动推送消息
  • 消息多消费者容易崩溃
  • 没有反馈模式

3. 角色

• broker：存储消息的服务器服务器
• topic：message类别 一个topic不一定就在一个物理机上
• producer：发message到broker
• consumer：从broker读信息
• consumer group：每个consumer属于一个特定的group

五、kafka

局限

六、rocketMQ

• Name Server：存储所有broker列表，保持长链接心跳，并给producer和consumer指路
• producer

1. 消息类型

• 普通消息：保障少，速度快，经常使用
• 延迟消息：设置延迟时间，时间到了才会被消费，如发送5分钟后的开课消息
• 顺序消息：对于指定topic，生产者保证发送顺序，消费者使用一个线程保证消费顺序
• 事务消息：保证消息到队列并被消费者消费，在消息队列有持久化功能，消费时有超时机制，成本高

2. 消息发送方式

• 可靠同步发送：消息发送被响应后再发下一条，经常使用
• 可靠异步发送：消息发出后不等响应，需要用户实现异步回调接口（SendCallBack），通过回调接口接受服务器响应
• 单向发送：发送方只发送不等待回答，也没有回调函数
  
  

3. 消费消息

• 广播消费：一个消息被多个消费者消费，即使消费者处于一个group
• 集群消费：一个消息只能被group中一个消费者消费
  

4. broker存储消息

• broker备份策略
  brokerA收到消息回去B、C备份消息，rocketMQ默认3个broker
  
• 消息存储机制
  broker的CommitLog文件先存储生产者消息，这是物理存储
  broker内部将消息分发到多个ConsumeQueue队列文件，存储消息的物理地址，这是逻辑队列
  消息异步写入ConsumeQueue后，消费者才可见

十、引用

1. https://www.zhihu.com/question/54152397/answer/1699061353?utm_source=wechat_session&utm_medium=social&utm_oi=650811657614397440&utm_content=group2_Answer&utm_campaign=shareopn
   默认需要消费者ack回复，若未回复，消息会进入重试队列、死信队列
2. 全新的界面设计 ，将会带来全新的写作体验；
3. 在创作中心设置你喜爱的代码高亮样式，Markdown 将代码片显示选择的高亮样式 进行展示；
4. 增加了 图片拖拽 功能，你可以将本地的图片直接拖拽到编辑区域直接展示；
5. 全新的 KaTeX数学公式 语法；
6. 增加了支持甘特图的mermaid语法¹ 功能；
7. 增加了 多屏幕编辑 Markdown文章功能；
8. 增加了 焦点写作模式、预览模式、简洁写作模式、左右区域同步滚轮设置 等功能，功能按钮位于编辑区域与预览区域中间；
9. 增加了 检查列表 功能。

功能快捷键

撤销：Ctrl/Command + Z
重做：Ctrl/Command + Y
加粗：Ctrl/Command + B
斜体：Ctrl/Command + I
标题：Ctrl/Command + Shift + H
无序列表：Ctrl/Command + Shift + U
有序列表：Ctrl/Command + Shift + O
检查列表：Ctrl/Command + Shift + C
插入代码：Ctrl/Command + Shift + K
插入链接：Ctrl/Command + Shift + L
插入图片：Ctrl/Command + Shift + G
查找：Ctrl/Command + F
替换：Ctrl/Command + G

合理的创建标题，有助于目录的生成

直接输入1次#，并按下space后，将生成1级标题。
输入2次#，并按下space后，将生成2级标题。
以此类推，我们支持6级标题。有助于使用TOC语法后生成一个完美的目录。

如何改变文本的样式

强调文本 强调文本

加粗文本 加粗文本

标记文本

删除文本

引用文本

H₂O is是液体。

2¹⁰ 运算结果是 1024.

插入链接与图片

链接: link.

图片:

带尺寸的图片:

居中的图片:

居中并且带尺寸的图片:

当然，我们为了让用户更加便捷，我们增加了图片拖拽功能。

如何插入一段漂亮的代码片

去博客设置页面，选择一款你喜欢的代码片高亮样式，下面展示同样高亮的 代码片.

// An highlighted block
var foo = 'bar';

生成一个适合你的列表

• 项目
  • 项目
    • 项目

1. 项目1
2. 项目2
3. 项目3

• 计划任务
• 完成任务

创建一个表格

一个简单的表格是这么创建的：

项目	Value
电脑	$1600
手机	$12
导管	$1

设定内容居中、居左、居右

使用:---------:居中
使用:----------居左
使用----------:居右

第一列	第二列	第三列
第一列文本居中	第二列文本居右	第三列文本居左

SmartyPants

SmartyPants将ASCII标点字符转换为“智能”印刷标点HTML实体。例如：

TYPE	ASCII	HTML
Single backticks	'Isn't this fun?'	‘Isn’t this fun?’
Quotes	"Isn't this fun?"	“Isn’t this fun?”
Dashes	-- is en-dash, --- is em-dash	– is en-dash, — is em-dash

创建一个自定义列表

Markdown

Text-to- HTML conversion tool

Authors

John

Luke

如何创建一个注脚

一个具有注脚的文本。²

注释也是必不可少的

Markdown将文本转换为 HTML。

KaTeX数学公式

您可以使用渲染LaTeX数学表达式 KaTeX:

Gamma公式展示 $\Gamma (n)=(n-1)!\forall n\in \mathbb{N}$ 是通过欧拉积分

$$\Gamma (z)={\int }_0^{\infty }{t}^{z-1}{e}^{-t}dt.$$

你可以找到更多关于的信息 LaTeX 数学表达式here.

新的甘特图功能，丰富你的文章

• 关于 甘特图 语法，参考 这儿,

UML 图表

可以使用UML图表进行渲染。 Mermaid. 例如下面产生的一个序列图：

这将产生一个流程图。:

• 关于 Mermaid 语法，参考 这儿,

FLowchart流程图

我们依旧会支持flowchart的流程图：

• 关于 Flowchart流程图 语法，参考 这儿.

导出与导入

导出

如果你想尝试使用此编辑器, 你可以在此篇文章任意编辑。当你完成了一篇文章的写作, 在上方工具栏找到 文章导出 ，生成一个.md文件或者.html文件进行本地保存。

导入

如果你想加载一篇你写过的.md文件，在上方工具栏可以选择导入功能进行对应扩展名的文件导入，
继续你的创作。

---

1. mermaid语法说明 ↩︎

2. 注脚的解释 ↩︎