项目模拟实现消息队列第一天

最新推荐文章于 2024-07-14 14:59:27 发布
最新推荐文章于 2024-07-14 14:59:27 发布
阅读量987 收藏 21
点赞数 27
文章标签： java 开发语言
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_72953218/article/details/135982474
版权

目录

认识消息队列

生产者消费者模型的作用

1.解耦合（写代码的追求 高内聚，低耦合）

2.削峰填谷

市面一些知名MQ：

需求分析

消息队列要提供的核心API

交换机类型：

1.Direct——直接交换机

2.Fanout——扇出交换机

3.Topic——主题交换机

4.Header——消息头交换机（应用场景比较少，规则复杂)

网络通信

1.创建Connection                    

2.关闭Connection                    

3.创建Channel                          

4.关闭Channel

认识消息队列

消息队列称为（Message Queue ,MQ.  在多线程常常会谈到一个阻塞队列（Blocking Queue)->生产者消费者模型

所谓的消息队列，就是把阻塞队列这样的数据结构，单独提取出了一个程序，独立进行部署->生产者消费者模型（进程和进程之间/服务和服务之间）

分布式系统-整个服务器程序，不是一个单一的程序了，而是一组服务器构成的集群。

生产者消费者模型的作用

1.解耦合（写代码的追求 高内聚，低耦合）

本来分布式系统，a服务器调用b服务器（A给B发送请求，B给A返回响应）->A和B耦合比较大，如何解耦合呢？ 引入消息队列后，A把请求发给消息队列，B再从消息队列中获取到请求。

2.削峰填谷

A是入口服务器，A再去调用B完成一些具体的业务，如果A和B直接通信，如果A突然收到一组用户请求的峰值，此时B也会感受到峰值->(物理上的服务器，硬件资源都是有上限的（包括但是不限于，CPU,内存,硬盘，网络带宽）

引入消息队列之后，A把请求发送给消息队列，B从队列中获取请求，虽然A收到的请求很多，队列收到的请求也不少，但是B可以按照原有节奏来取需求，不至于一下子收到很多的量。

市面一些知名MQ：

RabbitMQ

Kafka

RocketMQ:阿里的名气小

ActiveMQ:用的更少

MQ的使用暂时不去讨论

我们去关注MQ怎么模拟实现出来

以RabbitMQ为蓝图去了解。

需求分析

1.生产者(Producer)

2.消费者(Comsumer)

3.中间人（Broker)

4.发布(Publish)    生产者向中间人这里投递信息的过程

5.订阅(Subscribe) 哪些消费者要从这个中间人这里取数据，这个注册的过程，称为订阅

（火影忍者充月卡）

6.消费：消费者从中间人这里取数据的动作（领月卡）

服务器很多种含义：

1.7*24小时持续工作的电脑，配置比普通电脑高很多，永远是在机房里面，通过网络进行操作。

2.物理服务器上跑的服务器程序（一个/一种具体的程序）

3.更广义，更抽象的概念（客户端-服务器),主动发起请求的是客户端被动接受的是服务器

BrokerServer内部也涉及到一些关键概念

1.虚拟主机（Virtual Host)类似于Mysql中database，算是一个逻辑上的数据集合

一个Broker Server也可以组织多种不同类别的数据，可以使用Virtual Host做出逻辑上的区分

实际开发中，一个Broker Server可能会同时用来管理多组业务线上的数据，就可以使用VirtualHost做出区分

2.交换机（Exchange)

生产者把消息投递给Broker Server实际上，是先把消息交给了Broker Server上的某个交换机，再由交换机把消息转发对应的队列

交换机，类似于饭店的服务员（转发姐）

3.队列（Queue)

真正用来存储处理消息的实体，后续消费者也是从对应的队列中取数据，一个大的消息队列中，可以存在很多小的队列

4.绑定(Binding)

把交换机和队列之间，建立起关联关系～～

可以把交换机和队列视为类似数据库中多对多的关系。一个交换机，可以对应多个队列，一个队列，也可以被多个交换机对应，在数据库的时候，多对多，会有一个中间表

5.消息

具体来说，可以认为是服务器A给B发的请求（通过MQ转发），就是一个消息，服务器B给A返回的响应也是一个消息，一个消息可以视为一个字符串，消息中具体包含啥样的数据都是程序员自定义的。

消息队列要提供的核心API

1.创建队列（queueDeclare)此处不使用Create这样的术语，而是使用Declare,Create就只是单纯的创建，Declare起到的效果是:不存在则创建，存在则不做事情

2.销毁队列（queueDelete)

3.创建交换机(exchangeDelete)

4.销毁交换机(exchangeDelete)

5.创建绑定(queueBind)

6.解除绑定(queueUnbind)

7.发布消息(basicPublish)

8.订阅消息(basicConsume)

消费消息不搞

(因为：MQ和消费者之间，工作模式有两种

1.Push(推)Broker把收到的数据，主动的发送给订阅的消费者  RabbitMQ只支持推的方式

2.Pull(拉)消费者主动调用Broker的api取数据 Kafka -支持拉

9.确认消息（basicAck) - TCP(通过确认应答)

这个api起到的效果，是可以让消费者显示的告诉broker server,这个消息我已经处理完毕了～，提高整个系统的可靠性～，保证消息处理没有遗漏。

就相当于是已读未回，已读已回这种

交换机类型：

交换机在转发消息的时候，有一套转发的规则的！，提供了几种不同的交换机类型来描述这里不同的转发规则～

RabbitMQ主要实现了四种交换机类型(也是根据AMQF协议定义的，用来描述交换机张什么样子）

1.Direct——直接交换机

生产者发送消息，会指定一个"目标队列"的名字

交换机收到之后,就看看绑定的队列里，有没有匹配的队列～如果有，转发过去（把消息塞进对应的队列中)如果没有，就直接丢弃

2.Fanout——扇出交换机

3.Topic——主题交换机

有两个关键概念

(1)bindingKey.把队列和交换机绑定的时候，指定一个单词（如同一个暗号）

(2)routingKey.生产者发送消息的时候，也指定一个单词

如果当前routingKey和bindingKey能对上，此时就可以把这个消息转发到对应的队列中

4.Header——消息头交换机（应用场景比较少，规则复杂)

持久化：

虚拟主机，交换机，队列，绑定，消息，都需要让BrokerServer组织管理

对于上述这些概念对应的数据，需要存储和管理起来，此时内存和硬盘上都会各自存储一份，以内存为主，硬盘为辅

在内存中存储的原因:

对于MQ来说，能够高效的转发处理数据，是非常关键的指标！因此使用内存来组织上述数据，得到的效率，比放硬盘要高的多

(但是一旦断电之后，内存的内容就会丢失,所以在硬盘上存储的原因，为了防止内存中的数据随着进程重启/主机重启而丢失，硬盘的寿命几年-几十年（也要通通电）

网络通信

其他的服务器（生产者/消费者)通过网络，和咱们的Broker Server进行交互的～

此处设定使用，TCP+自定义的应用层协议（这里的主要工作，就是让客户端可以通过网络，调用broker server提供的编程接口，所以客户端，也需要提供上述方法，只不过服务器版本的上述办法，效果是真正干实事，把管理数据进行调整，而客户端这边，只是进行请求的发送和接受），实现生产者/消费者和BrokerServer之间的交互工作​​​​​​​​​​​​​​​​​​​​​

此处，客户端调用了一个本地的方法，结果这个方法在背后，给服务器发了一系列消息，有福气完成了一系列工作，站在调用者的角度，看到的只是说，当前这个功能已经完成，并不知道这背后的细节，虽然调用的事一个本地方法，实际上像是调用了一个远端服务器的方法一样->(远程过程调用RPC)

客户端除了上面9个和服务器这边对应的方法之外，还需提供一下四种方法

1.创建Connection                    

一个Connection对象，就代表一个TCP连接

2.关闭Connection                    
3.创建Channel                          

通道/信道,一个Connection里面可以包含多个Channel,每个Channel上面传递的数据都是互不相干的。

TCP，建立/断开一个连接，成本还是很高的，因此很多时候，我们不希望频繁的建立断开TCP连接～此处的Channel只是一个逻辑概念，比TCP连接的建立和断开，轻量很多

Connection就像是一个打针的那个管，Channel就像是瓶子，我们只需要换瓶子即可

4.关闭Channel
狗哥不是甜妹
关注
  • 27
    点赞
  • 踩
  • 21
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 2
    评论
【华为OD机试真题2023B卷 JAVA&JS】模拟消息队列
qq_34465338的博客
05-23 2264
模拟消息队列 让我们来模拟一个消息队列的运作，有一个发布者和若干消费者，发布者会在给定的时刻向消息队列发送消息，若此时消息队列有消费者订阅，这个消息会被发送到订阅的消费者中优先级最高（输入中消费者按优先级升序排列）的一个；若此时没有订阅的消费者，该消息被消息队列丢弃。消费者则会在给定的时刻订阅消息队列或取消订阅。 当消息发送和订阅发生在同一时刻时，先处理订阅操作，即同一时刻订阅的消费者成为消息发送的候选。当消息发送和取消订阅发生在同一时刻时，先处理取消订阅操作，即消息不会被发送到同一时刻取消订阅的消费者。
【华为OD统一考试B卷 | 100分】模拟消息队列（C++ Java JavaScript Python）
算法大师，励志更新全网最全的算法题库！
06-07 2847
让我们来模拟一个消息队列的运作，有一个发布者和若干消费者，发布者会在给定的时刻向消息队列发送消息，
【华为OD统一考试B卷 | 100分】模拟消息队列（C++题解）
算法大师，励志更新全网最全的算法题库！
06-11 1335
让我们来模拟一个消息队列的运作，有一个发布者和若干消费者，发布者会在给定的时刻向消息队列发送消息，
【Java并发】生产者-消费者模式简单实现（模拟消息队列）
哈哈哈哈哈哈哈
04-01 3911
简单的模拟了一个消息队列 Producer：生产者 Consumer：消费者 Message：消息体 import java.util.concurrent.ArrayBlockingQueue; import java.util.concurrent.BlockingQueue; public class Test4 { public sta...
SpringBoot集成RabbitMq消息队列【附源码】
笑小枫
12-25 2136
项目整合RabbitMQ消息队列，以案例的形式展示了不同模式的交换机实现过程，演示了死信队列和延时队列应该怎么实现。
SpringBoot整合RabbitMQ实现延迟队列
xiangjunyes的博客
12-08 1553
延迟队列是什么 延时队列的队列内部是有序的，最重要的特性就体现在它的延时属性上，延时队列中的元素是希望在指定时间到了以后或之前取出和处理，简单来说，延时队列就是用来存放需要在指定时间被处理的元素的队列。 延迟队列使用场景 订单在十分钟之内未支付则自动取消 新创建的店铺，如果在十天内都没有上传过商品，则自动发送消息提醒。 用户注册成功后，如果三天内没有登陆则进行短信提醒。 用户发起退款，如果三天内没有得到处理则通知相关运营人员。 预定会议后，需要在预定的时间点前十分钟通知各个与会人员参加会议 这些场景都有
【消息队列开发】 背景知识与需求分析
m0_71731682的博客
03-12 1275
博主将从零开始开发一个消息队列的项目，今天是项目的第一天。了解消息队列的背景知识对该项目进行需求分析，为后续开发项目有一个前进的方向。
消息队列kafka中间件详解：案例解析(第10天)
syhiiu的博客
06-21 1599
本文主讲述了 消息队列，Kafka的架构，Kafka的相关使用和常用shell命令，Kafka的Python API的操作；
延时队列的三种实现方案
小熊的学习记录
05-02 5871
在分布式系统中，延时队列（Delay Queue）是一个常见的工具，它允许程序能够按照预定时间处理任务（类似于定时任务)。延时队列允许我们将任务延时到指定的时间执行，这样就可以将任务按照优先级和执行时间来处理，从而提高系统的可靠性和性能。延时队列是一种特殊的队列相比于普通队列（先进先出）最大的区别就体现在其延时属性上。在这种队列中，每个元素都有一个预设的延时时间，只有当这个时间到期后，元素才可以被消费。这种机制使得延时队列可以用于实现定时任务、消息重试等功能。
银行业务模拟，队列操作
11-22
注意，在此检查过程中，一旦银行资金总额少于或等于刚才第一个队列中最后一个客户(第二种业务)被接待之前的数额，或者本次已将第二个队列检查或处理了一遍，就停止被盗(因为此时已不可能还有能满足者)转而继续接待第...
银行业务模拟数据结构课设(C语言版).docx
09-04
客户到达银行后先排第一个队，处理每个客户业务时，如果属于第一种，且申请额超出银行现存资金总额而得不到满足，则立刻排入第二个队等候，直至满足时才离开银行；否则业务处理完后立刻离开银行。 二、数据结构设计...
基于VUE实现的餐厅经营游戏项目源码
04-04
一个餐厅经营模拟类游戏，实现了厨师、顾客等角色的关键操作，完成从顾客等位、点菜、烹饪、用餐、支付的一系列状态变更的数据、信息、交互、展现的变化及处理 时间设定 每周7天，每天6小时，每小时30秒 头部的时间...
2022年计算机等级考试四级模拟试题.doc
11-20
6. **关键路径**：在图论中，关键路径是指决定项目最短完成时间的一系列活动。题目中没有提供完整的图信息，无法直接计算节点A到节点D的关键路径长度。 7. **散列表**：线性探查法是解决散列冲突的一种方法。在题目...
数据结构的课程设计-- 银行业务模拟 求顾客平均在银行逗留时间
07-04
注意：在此检查过程中，一旦银行的资金总额少于或者等于刚才第一个队列中最后一个客户（第二种业务）被接待之前的数额，或者本次已将第二个队列检查或处理了一遍，就停止检查（因为此时已不可能还有能满足者）转而...
java版的上门家政系统和PHP版的上门家政有什么区别？
baina666的博客
07-12 613
综上所述，Java版和PHP版的上门家政系统各有优缺点，选择哪种语言主要取决于项目的具体需求、预算、开发团队的技术栈以及未来的扩展计划等因素。同时，由于Java生态系统的复杂性和多样性，也可能需要投入更多的时间和资源来学习和掌握相关的技术和工具。Java版：Java拥有庞大的生态系统和丰富的第三方库，这为家政系统的开发和扩展提供了强大的支持。Java版：由于Java的编译执行机制和高效的垃圾回收算法，Java版家政系统通常具有更高的运行效率和更好的性能表现，尤其是在处理高并发、大数据量等复杂场景时。
Spring Security 授权
最新发布
persistence_PSH的博客
07-14 835
在 loadUserByUsername 方法，在查询数据库用户信息的时候，同时查询出用户的权限，这里以角色名代指权限。在 loadUserByUsername 方法，在查询数据库用户信息的时候，同时查询出用户的权限，这里以角色名代指权限。在 loadUserByUsername 方法，在查询数据库用户信息的时候，同时查询出用户的权限，这里以角色名代指权限。通过 RBAC 获取到用户的具体权限后，再通过 Security 的 用户-权限-资源 来进行权限控制。HttpSecurity 权限配置。
【Go系列】 Sync并发控制
u013379032的博客
07-14 967
在上一篇文章中，我们介绍了goroutine和channel，理论上，通过channel可以实现并发控制，但是其他语言的开发者可能更习惯一些原子操作的库。当然Go语言也会提供这样的库，所以我们今天了解一下sync库。
Java方法练习-双色球彩票系统
T1798218285的博客
07-11 323
红色球号码从1-33中选择；蓝色球号码从1-16中选择。投注号码由6个红色球号码和1个蓝色球号码组成。三等奖 5+1 / 5+0 3000。四等奖4+1 / 4+0 200。六等奖1+1 / 1+0 5。一等奖6+1 1000w。二等奖6+0 500w。五等奖3+1 / 2+1。
C语言实现一个银行业务模拟系统(四个服务窗口，用队列实现)
09-13
### 回答1： 我可以为您提供一个参考实现：首先，设置四个服务窗口，每个窗口都有一个队列来存放顾客的请求；每个队列都有一个标志位来表示是否有顾客在等待；每个窗口都有一个可以存放顾客信息的结构体，用来存放每个顾客的相关信息；客户进入银行后，根据业务种类，分配给不同的服务窗口，并将顾客的相关信息存入队列；服务窗口按照先来先服务的原则，逐个处理顾客的请求；当顾客请求处理完成后，服务窗口将会结束队列中的请求，并将顾客的信息从队列中删除。 ### 回答2： 银行业务模拟系统是一个常见的实际应用场景。下面是使用C语言实现一个银行业务模拟系统的大致步骤： 1. 首先，我们需要定义一个队列结构来表示每个服务窗口的队列。可以使用数组来实现队列结构，定义两个指针front和rear分别指向队首和队尾。 2. 然后，我们需要定义一个客户结构，用来保存每个客户的信息，比如姓名、身份证号等。可以使用结构体来定义客户结构。 3. 接下来，我们需要定义银行业务的具体操作。比如，客户到达银行时，将其加入到最短队列中；服务窗口完成一个客户的业务后，从队列中取出下一个客户继续服务。 4. 在完成上述操作的基础上，我们可以通过模拟银行业务的过程，统计客户的平均等待时间、平均办理时间等。 5. 最后，我们可以编写一个主函数，模拟银行的开放和结束时间，并输出统计结果。 下面是一个简单的C语言代码示例： ``` #include <stdio.h> #include <stdlib.h> #define MAX_QUEUE_SIZE 100 typedef struct{ char name[20]; int id; } Customer; typedef struct{ Customer customers[MAX_QUEUE_SIZE]; int front, rear; } Queue; void enqueue(Queue *q, Customer customer){ if(q->rear == MAX_QUEUE_SIZE){ printf("Queue is full!\n"); return; } q->customers[q->rear++] = customer; } Customer dequeue(Queue *q){ if(q->front == q->rear){ printf("Queue is empty!\n"); return; } return q->customers[q->front++]; } int main(){ Queue queues[4]; for(int i=0; i<4; i++){ queues[i].front = queues[i].rear = 0; } int num_customers = 10; // 测试10个客户 for(int i=0; i<num_customers; i++){ Customer customer; // 读取客户信息 printf("Enter customer name: "); fgets(customer.name, sizeof(customer.name), stdin); printf("Enter customer ID: "); scanf("%d", &customer.id); // 将客户添加到最短队列 int min_queue = 0; for(int j=1; j<4; j++){ if(queues[j].rear - queues[j].front < queues[min_queue].rear - queues[min_queue].front){ min_queue = j; } } enqueue(&queues[min_queue], customer); getchar(); // 清除缓冲区的换行符 } // 服务窗口处理客户 for(int i=0; i<4; i++){ printf("Queue %d:\n", i+1); while(queues[i].front < queues[i].rear){ Customer customer = dequeue(&queues[i]); printf("Processing customer: %s (ID: %d)\n", customer.name, customer.id); } } return 0; } ``` 以上是一个简单的银行业务模拟系统。你也可以根据实际需求进行不同的扩展和修改，比如增加对客户信息的更多操作，添加计数器来统计平均等待时间和平均办理时间等。 ### 回答3： 银行业务模拟系统是一种模拟真实银行业务的系统，通过使用C语言和队列数据结构，可以实现一个具备四个服务窗口的银行业务模拟系统。 首先，我们需要设计一个队列来表示银行的等待队列。队列是一个先进先出的数据结构，符合银行业务中的先来先服务原则。 其次，我们需要定义一个结构体来表示用户信息。结构体包含用户的姓名、办理业务类型等信息。 然后，我们可以定义一个具有四个服务窗口的数组，用来表示每个服务窗口的状态。如果服务窗口为空闲状态，则可以为队列中的下一个用户提供服务。 接下来，我们可以开始编写主函数。主函数中，我们可以使用循环来模拟银行的运行过程。首先，从用户输入中获取一个用户的信息。然后，根据服务窗口的状态，将用户信息加入到对应的队列中。如果有空闲的服务窗口，则将队列中的第一个用户提供服务，并将该服务窗口的状态更新为空闲。 最后，我们可以在主函数中设置一个循环，用来模拟银行一天的运行过程。在每个循环中，我们可以随机生成一定数量的用户，模拟用户的到来，并进行银行业务的处理。 在实现银行业务模拟系统时，我们还可以添加其他功能，如查询某个服务窗口的状态、查询队列中等待用户的数量等。 通过以上的步骤，我们可以使用C语言和队列实现一个银行业务模拟系统，帮助我们更好地理解和掌握队列等数据结构的应用。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

狗哥不是甜妹

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值