RocketMQ源码阅读——单点突破

最新推荐文章于 2020-06-04 01:34:12 发布
最新推荐文章于 2020-06-04 01:34:12 发布
阅读量94 收藏
点赞数
分类专栏： RocketMQ源码分析
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/wengfuying5308/article/details/105188756
版权

引言

使用此文单独记录阅读源码过程中，一些没见过的，没用过，不熟悉的类

类

Executors的4中类型的线程池

  • 固定线程大小线程池：最多多少个线程执行，留给其他任务执行的空间
  • 定时执行线程池：适合定时任务
  • 单个线程线程池：适合任务需要串行顺序执行的场景
  • 60s存活时间的线程池：适合大量短时间的异步任务
  • ForkJoinPool：这个没用过 以后再关注

ForkJoinPool

DefaultEventExecutorGroup
netty中处理event的线程池

netty

netty放在rocketmq的后面学习

djcjcdj
关注
专栏目录
springboot整合rocketmq源码
04-22
RocketMQ，由阿里巴巴开源，现在是Apache顶级项目，它支持发布/订阅模式和点对点模式的消息传递，具备高吞吐量、低延迟、高可用性及可扩展性。RocketMQ适用于大规模分布式系统中的消息传输，如订单处理、交易同步、...
基于Java语言的RocketMQ消息队列设计源码阅读解析
最新发布
10-03
该项目深入解析了基于Java语言的RocketMQ消息队列设计源码，共计包含2004个文件，其中Java源文件占比最高，达1581个，辅以...项目涉及的语言包括Java、Shell和Python，旨在为开发者提供RocketMQ的源码阅读和理解路径。
基于Java语言的RocketMQ-4.7.1版本设计源码阅读心得分享
10-03
该项目为RocketMQ-4.7.1版本的Java语言实现，总计包含1176个文件，涵盖979个Java源文件、54个Markdown文档、35个XML配置文件、25个PNG...源码阅读笔记详实记录了其设计细节，涉及Java、Shell和Python等多种编程语言。
RocketMQ源码包
12-22
源码包4.7.1版本包含了RocketMQ的全部源代码，为开发者提供了深入理解其内部机制、定制功能或进行二次开发的机会。在Java编程环境下，我们可以深入研究RocketMQ的核心组件和工作流程。 1. **RocketMQ架构** ...
基于Java、Shell和Python语言的rocketmq设计源码阅读解析
09-30
本项目深入解析了基于Java、Shell和Python语言的RocketMQ设计源码，总计包含1281个文件，其中包括1063个Java源文件、66个Markdown文档、32个XML配置文件、26个PNG图片文件、20个YAML配置文件、18个Shell脚本文件、11...
手撕RocketMQ源码——AllocateMessageQueueStrategy
cjdjcdj的博客
05-24 1678
引言 集群模式消费、推模式下的消息队列的负载均衡算法 策略模式 包括一致性hash、平均分配、平均轮询分配、自定义消费队列、按机房hash算法实现
RocketMQ Message
cjdjcdj的博客
04-11 1468
引言 用户发送消息封装类是Message和MessageBatch，分别是普通消息和批量消息 主要属性 private String topic; private int flag; private Map<String, String> properties; private byte[] body; private String transactio...
浅析ComsumeQueue和IndexFile对RocketMQ的作用
cjdjcdj的博客
06-04 1285
讲讲IndexFile的存储结构 下图就是IndexFile的存储结构。 对于一个组件我们要疑惑的问题主要有以下这些？ IndexFile是什么？ indexFile是rocketmq用来索引消息的hash table数据结构，以文件的形式实现。hash冲突是用链表来解决的 一个indexFile最多存储2000w条消息 总共包含一个文件。文件由以下几部分组成：indexHead，500w个hash槽和2000w个index条目。那么这其中的曲折关系是什么呢。 indexHead的内容非常容易理解， be
手撕RocketMQ源码——ConsumeMessageService
cjdjcdj的博客
05-26 1052
引言
NettyRemotingClient源码分析
cjdjcdj的博客
04-10 1019
引言 rocketmq远程调用客户端的实现类，使用netty作为网络框架。 继承NettyRemotingAbstract。 NettyRemotingAbstract封装了同步、异步、oneway调用的具体实现，方便子类（NettyRemotingClient和NettyRemotingServer）复用 NettyRemotingClient的三种请求方法 发送请求的异常处理 同步发送请求 /...
DefaultMQProducerImpl源码分析
cjdjcdj的博客
04-11 967
引用 实现了MQProducerInner接口 MQProducerInner 这层接口是与MQClientInstance交互的 public interface MQProducerInner { Set<String> getPublishTopicList(); boolean isPublishTopicNeedUpdate(final String top...
SendMessageProcessor源码分析
cjdjcdj的博客
04-25 955
引用
手撕RocketMQ源码——队列负载均衡RebalanceImpl
cjdjcdj的博客
05-24 638
引言 是用来做消费者负载均衡的。当有消费者退出，或者新加入时，用来调节多个消费者与队列的消费关系。 针对不同的消费者实现类，存在三种不同的rebalance策略，分别的RebalancePullImpl、RebalanceLitePullImpl、RebalancePushImpl。继承RebalanceImpl。 RebalancePullImpl ...
AllocateMappedFileService源码分析
cjdjcdj的博客
04-19 627
引言 创建MappedFile的类。 使用了生产者消费者模式创建文件。 使用了ConcurrentHashMap put是否 因为单个文件大小为1G，所有使用一个消费者创建mappedFile较为合适 类图 主要属性 private static final InternalLogger log = InternalLoggerFactory.getLogger(LoggerName.STORE...
MQClientAPIImpl源码分析
cjdjcdj的博客
04-11 621
引言 解耦用户接口和远程调用接口。负责用户接口的发送消息的处理和接收broker的响应。 持有RemotingClient接口，并向remotingClient注册了几种requestCode的处理器ClientRemotingProcessor。 这一层是处理head和msgBody转换成RemotingCommand，broker的响应RemotingCommand和sendResult的转换...
手撕RocketMQ源码——PullMessageService
cjdjcdj的博客
05-26 602
引言 拉取消息的管理类。 接收拉取消息请求，触发拉取消息流程 提供多种请求的方法，立即执行和延迟执行 运行方法 public void run() { log.info(this.getServiceName() + " service started"); while (!this.isStopped()) { try { PullRequest pullRequest = this.pullRequestQue
IndexFile原码分析
cjdjcdj的博客
05-26 560
简单点引言示意图build index file 引言 indexFile是rocketmq的消息offset的索引文件，索引的key是message的uniq_key，由生产者发送消息时生成。 示意图 使用文件作为的hashMap。整个文件包括40字节长的IndexHead，500w4字节长的hash槽，2000w20字节长的index条目。 对key求hash放入hash槽。根据当前的inde...
手撕RocketMQ源码——TransactionMQProducer
cjdjcdj的博客
05-27 544
引言 事务消息发送的实现 Demo方法 public static void main(String[] args) throws MQClientException, InterruptedException { TransactionListener transactionListener = new TransactionListenerImpl(); TransactionMQProducer producer = new TransactionMQProducer(
手撕RocketMQ源码——DefaultMQPushConsumer
cjdjcdj的博客
05-26 523
引言 rocketmq提供推拉两种消息模型，本类是推模型实现的用户接口。 Demo 摘自rocketmq的PushConsumer 我们会在后续步骤分析，每一步背后的处理过程。 DefaultMQPushConsumer consumer = new DefaultMQPushConsumer("please_rename_unique_group_name_1"); // 设置从哪里开始消费 consumer.setConsumeFromWhere(ConsumeFro
深入研究RocketMQ源码提升技术深度
- 通过阅读源码和编写测试用例，熟悉 RocketMQ的配置和监控。 - 结合实际业务场景，通过源码解析，优化消息发送和消费的性能。 通过以上知识点的学习和源码分析，可以加深对RocketMQ架构设计和内部工作机制的理解，...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值