为初学者而来~手工最简MQ（一）设计篇

最新推荐文章于 2024-06-12 08:54:04 发布
置顶 最新推荐文章于 2024-06-12 08:54:04 发布
阅读量1.1k 收藏 1
点赞数 3
分类专栏： mq 文章标签： kafka mq netty
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xvshu/article/details/109113562
版权
本文旨在为初学者解析MQ设计，作者简化了kafka的逻辑，创建了一个单机版MQ。服务端包括消息文件存储（参考kafka，分为.index和.data文件）和网络编程（使用netty）。客户端涉及连接管理、生产者（发送消息到队列）和消费者（从队列获取消息）。该系列文章还包括后续的Broker和Client实现。
摘要由CSDN通过智能技术生成

为初学者而来~手工最简MQ（一）设计篇
为初学者而来~手工最简MQ（二）Broker
为初学者而来~手工最简MQ（三）Client

为什么重复造轮子

MQ（Message Queue）是互联网公司绕不过去的一个技术，核心功能就是进行消息的收发管理，已达到某些特殊功能，比如流量削峰，异步执行，日志聚合等。
介于这个原因，看了很多mateQ，kafka，roccketMQ的资料，虽然算是一点点的入门了，依然感觉隔着层窗户纸，后来经过考虑，觉得mq经过多年的演变，已经是一个复杂的事物，对于初学者，不利于理解，我决定根据自己的理解，自己手写一个最简单mq，以帮助自己理解，也给后来者提供一个简单的参考。
如有大神，可直接看源码：git-soomq

首先给大家放一张图，便于初学者理解：
mq简单模型

最低0.47元/天 解锁文章
ESOO
关注
专栏目录
c#人事管理系统(简单设计，适合初学者)
05-05
总的来说，这个C#人事管理系统为初学者提供了一个实践平台，通过实际操作，可以提升编程技能，理解软件开发的全生命周期，包括需求分析、设计、编码、测试和维护等环节。同时，这也是一个很好的案例，让初学者能够在...
手写MQ消息中间件（基于netty实现）
祁_z
12-07 1411
实现代码：https://pan.baidu.com/s/1YLD3t7OExJZBrRHYEpF1DA 通讯协议，什么是协议？ 如：生产者投递消息到mq服务器之间的通讯如何定义格式就叫协议，（mq协议是amqp协议，是mq作者自己起的通讯协议名称）。 流程图 实现流程: 1.生产者把消息投递到netty服务，消费者自己取。 2.生产者把消息投递到netty服务，自动发送给消费者。...
为初学者而来~手工最简MQ（三）Client
ESOO
10-16 996
2，client 2.1 连接管理 通过netty与mq服务器进行连接，并相应生产者与消费者的请求，通过netty自带的序列化工具，将消息序列化未byte字节进行传输 2.1.1 服务启动，连接broker package com.esoo.mq.client.connection; import io.netty.bootstrap.Bootstrap; import io.netty.buffer.PooledByteBufAllocator; import io.netty.channel.*; i
✔ ★Java项目——设计一个消息队列（一）【消息队列的背景知识、项目的需求分析、项目的模块划分】
蓝天it（让亿万孩子在蓝天下共享优质教育）
04-06 776
另⼀⽅⾯, Producer 和 Consumer 则通过⽹络的⽅式, 远程调⽤这些 API, 实现 ⽣产者消费者模型.• Topic 是发⼀个画图红包, 发 10 块钱红包, 同时出个题, 得画的像的⼈, 才能领. 也是每个领到的⼈。在实际的后端开发中, 尤其是分布式系统⾥, 跨主机之间使⽤⽣产者消费者模型, 也是⾮常普遍的需求.⼿动应答的⽬的, 是为了保证消息确实被消费者处理成功了. 在⼀些对于数据可靠性要求⾼的场景, ⽐。
RocketMQ系列（三）——原理篇
wp120453的博客
12-25 1209
前言  本篇是RocketMQ系列的第三篇原理（填坑）篇，会从客户端侧（Producer、Consumer）逐一对第一篇中提到的各种特性的实现原理进行解析。文中会出现较多的代码，建议对照源码阅读。  前篇说到RocketMQ是阿里巴巴团队开发并经过长期实践后捐赠给Apache开源基金会的消息中间件，所以就存在阿里和Apache两个版本的源码，本文使用的是Apache的rocket-client 4.4.0.2版，其它版本可能存在细微差别。 一些核心问题 公共机制  长连接与心跳机制 发送环节  消息发送核心
RabbitMQ - 以 MQ 为例，手写一个 RPC 框架 demo
CYK_byte的博客
05-08 1179
本篇文章来自于笔者之前写过的一个系列 —— “根据源码，模拟实现 RabbitMQ” 系列，不妨可以去看看~
100个C#初学者编程实例
04-18
这个名为"100个C#初学者编程实例"的资源是为那些正在学习C#编程的新手设计的，旨在通过实际操作帮助他们更好地理解和掌握C#的基本概念和语法。 1. **基础语法**：C#的基础包括变量、数据类型（如int, string, bool...
简单的php网站源码初学者必看
07-23
总之，这个简单的PHP企业站源码为初学者提供了一个实际操作的平台，通过对源码的阅读、修改和运行，可以巩固理论知识，提升动手能力，逐步成为一名熟练的PHP开发者。在学习过程中，不断实践、调试和优化代码，将有助...
java小项目 适合初学者
12-18
对于初学者来说，Java提供了一个良好的学习平台，因为它的语法清晰，易于理解。"java小项目 适合初学者"这样的资源集合是入门Java编程的理想起点。 这个标题表明，你将接触到一系列小型的Java项目，这些项目通常是...
selenium初学者指南
03-20
本指南专为初次接触Selenium的读者设计，旨在帮助你们快速掌握这个强大的工具，从而提高测试效率，确保软件质量。 **1. Selenium简介** Selenium是一个开源的、跨平台的自动化测试框架，支持多种编程语言如Java、...
MQ测试工具使用介绍
weixin_42556307的博客
03-06 969
填写完成以后，点击右上角的开始按钮进行连接。如果连接不成功会显示失败并将失败的原因打印出来。
太狠了！阿里大牛纯手写RabbitMQ 笔记，GitHub 70K
2401_83915450的博客
04-12 400
最近我根据上述的技术体系图搜集了几十套腾讯、头条、阿里、美团等公司21年的面试题，把技术点整理成了视频（实际上比预期多花了不少精力），包含知识脉络 + 诸多细节，由于篇幅有限，这里以图片的形式给大家展示一部分。6.Spring t Boot 整合 RabbitMQ。2. 安装及配置 RabbitMQ。5. RabbitMQ 工作模式。3. RabbitMQ 入门。7. RabbitMQ 高级。1. 消息中间件概述。
java mq_Java语言快速实现简单MQ消息队列服务
weixin_39624367的博客
02-12 327
使用JAVA语言自己动手来写一个MQ (类似ActiveMQ,RabbitMQ) 主要角色首先我们必须需要搞明白MQ (消息队列)中的三个基本角色ProducerBrokerConsumer整体架构如下所示 自定义协议首先从上一篇中介绍了协议的相关信息,具体厂商的MQ(消息队列)需要遵循某种协议或者自定义协议 , 消息的生产者和消费者需要遵循其协议(约定)才能后成功地生产消息和生产消...
模拟实现消息队列项目(系列8) -- 实现MqClient
小白的博客
08-09 658
消息队列 -- 客户端实现
java ibm mq 连接池,使用IBM MQ Client的JMS连接池
weixin_42210638的博客
02-16 918
We are using MQIPT 9.2 between our IBM MQ 9.x server and IBM MQ clients. We're also using the IBM MQ client jar in Java to connect to the queue manager to push and receive messages which is working fi...
Java项目之消息队列（手写java模拟实现mq）【上】（数据库操作、文件操作、内存操作）
最新发布
蓝天it（让亿万孩子在蓝天下共享优质教育）
06-12 1009
Java项目之消息队列（手写java模拟实现mq）【一、实现mq必须知道的内容！！！】⼀. 消息队列背景知识⼆. 需求分析核⼼概念（面试题）★在 Broker 中, ⼜存在以下概念.核⼼ API ★交换机类型 (Exchange Type)持久化⽹络通信 ★消息应答三. 模块划分四、项目创建五、创建核⼼类创建 ExchangeExchange参数：名称、交换机类型、持久化、自动删除、额外参数针对数据库操作方便转成String，重写hashmap的get，set方法ExchangeType创建 MSGQueu
✔ ★Java项目——设计一个消息队列（五）【虚拟主机设计】
蓝天it（让亿万孩子在蓝天下共享优质教育）
05-03 982
◦ Topic: routingKey 是⼀个特定的字符串, 会和 bindingKey 进⾏匹配. 如果匹配成功, 则发到对应的队列中. 具体规则后续介绍.• 使⽤⼀个阻塞队列⽤来触发消息消费. 称为令牌队列. 每次有消息过来了, 都往队列中放⼀个令牌(也就是队列名), 然后消费者再去消费对应队列的消息.• 发布消息其实是把消息发送给指定的 Exchange, 再根据 Exchange 和 Queue 的 Binding 关系, 转发到对应队列中.• 新来订阅者的时候, 需要先消费掉之前积压的消息.
手写消息队列（基于RabbitMQ）
LEE180501的博客
11-19 1502
在实际的后端开发中，特别是分布式系统里，跨主机使用生产者消费者模型是非常普遍的需求。因此通常会把阻塞队列单独分离出来，赋予更加丰富的功能，封装成一个独立的服务器程序，这个程序就称为 消息队列。
RocketMQ MQClientInstance、生产者实例启动源码分析
vnjohn 博主 > 主线分享后端领域业务设计知识、源码思想、架构设计
01-06 1732
该篇博文主要介绍 MQClientInstance 客户端实例以及 TopicRouteData 主题元数据信息，结合 Dashboard 看会更加的清晰，后续介绍了生产者实例启动的一个过程，其中介绍了几个核心的地方：NettyRemotingClient Netty 客户端、MQClientInstance#startScheduledTask 涉及到的定时调度任务、PullMessageService 推送模式作用的类、RebalanceService 重平衡服务
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值