RocketMQ 第六章:手把手教老婆实现-批量消息生产者和消费者

限制:

第二节:批量消息-生产者和消息者步骤说明

批量消息生产者代码实现步骤

批量消息消费者代码实现步骤

第三节:批量消息生产者-小于4MB

效果:

第四节:批量消息消费者

效果:

第五节:批量消息生产者-大于4MB

消息拆分工具类

生产者

效果:

第六节:批量消息消费者-大于4MB

效果:


第一节:介绍

======

批量发送消息能显著提高传递小消息的性能。

限制:


  • 应该有相同的topic,相同的waitStoreMsgOK

  • 不能是延时消息

  • 这一批消息的总大小不应超过4MB(默认配置:DefaultMQProducer的maxMessageSize参数,可在broker*.properties配置文件中修改)。

第二节:批量消息-生产者和消息者步骤说明

====================

批量消息生产者代码实现步骤


1.创建消息生产者producer,并制定生产者组名

2.指定Nameserver地址

3.启动producer

4.创建消息对象集合,指定主题Topic、Tag和消息体

5.发送集合消息

6.关闭生产者producer

批量消息消费者代码实现步骤


1.创建消费者Consumer,制定消费者组名

2.指定Nameserver地址

3.订阅主题Topic和Tag

4.设置回调函数,处理消息

5.启动消费者consumer

注意:消费者的 Topic 和 Tag 需要和生产者保持一致

第三节:批量消息生产者-小于4MB

=================

public class Producer {

public static void main(String[] args) throws Exception {

// 1.创建消息生产者producer,并制定生产者组名

DefaultMQProducer producer = new DefaultMQProducer(“demo_producer_batch_group”);

// 2.指定Nameserver地址

producer.setNamesrvAddr(“192.168.88.131:9876”);

// 3.启动producer

producer.start();

System.out.println(“生产者启动”);

List msgs = new ArrayList();

// 4.创建消息对象,指定主题Topic、Tag和消息体

/**

  • 参数一:消息主题Topic

  • 参数二:消息Tag

  • 参数三:消息内容

*/

for (int i = 0; i < 20; i++) {

Message msg = new Message(“Topic_batch_demo”, “Tag_batch_demo”, (“Hello 虚竹,这是批量消息” + i).getBytes());

msgs.add(msg);

}

// 5.发送消息

SendResult result = producer.send(msgs);

// 发送状态

SendStatus status = result.getSendStatus();

System.out.println(“发送结果:” + result);

// 线程睡1秒

TimeUnit.SECONDS.sleep(1);

// 6.关闭生产者producer

producer.shutdown();

System.out.println(“生产者关闭”);

}

}

效果:


0

第四节:批量消息消费者

============

public class Consumer {

public static void main(String[] args) throws Exception {

//1.创建消费者Consumer,制定消费者组名

DefaultMQPushConsumer consumer = new DefaultMQPushConsumer(“demo_consumer_order_group”);

//2.指定Nameserver地址

consumer.setNamesrvAddr(“192.168.88.131:9876”);

//消息拉取最大条数

consumer.setConsumeMessageBatchMaxSize(2);

//3.订阅主题Topic和Tag

consumer.subscribe(“Topic_batch_demo”, “*”);

//4.设置回调函数,处理消息

consumer.registerMessageListener(new MessageListenerOrderly() {

//接受消息内容

@Override

public ConsumeOrderlyStatus consumeMessage(List msgs, ConsumeOrderlyContext consumeOrderlyContext) {

for (MessageExt msg : msgs) {

try {

//获取主题

String topic = msg.getTopic();

//获取标签

String tags = msg.getTags();

//获取信息

byte[] body = msg.getBody();

String result = new String(body, RemotingHelper.DEFAULT_CHARSET);

System.out.println(“Consumer消费信息:topic:” + topic + “,tags:”+tags+

“,result”+ result);

} catch (UnsupportedEncodingException e) {

e.printStackTrace();

//重试

return ConsumeOrderlyStatus.SUSPEND_CURRENT_QUEUE_A_MOMENT;

}

}

return ConsumeOrderlyStatus.SUCCESS;

}

});

//5.启动消费者consumer

consumer.start();

}

}

效果:


0

第五节:批量消息生产者-大于4MB

=================

消息拆分工具类


要发送大于4MB的消息,我们只需要把大的消息分裂成若干个小的消息。首先创建一个拆分消息的工具类

public class ListSplitter implements Iterator<List> {

private int SIZE_LIMIT = 1024 * 1024 * 4;

private final List messages;

private int currIndex;

public ListSplitter(List messages) {

this.messages = messages;

}

public ListSplitter(List messages, DefaultMQProducer mqProducer) {

this.messages = messages;

this.SIZE_LIMIT = mqProducer.getMaxMessageSize();

}

@Override

public boolean hasNext() {

return currIndex < messages.size();

}

@Override

public List next() {

int nextIndex = currIndex;

int totalSize = 0;

for (; nextIndex < messages.size(); nextIndex++) {

Message message = messages.get(nextIndex);

int tmpSize = message.getTopic().length() + message.getBody().length;

Map<String, String> properties = message.getProperties();

for (Map.Entry<String, String> entry : properties.entrySet()) {

tmpSize += entry.getKey().length() + entry.getValue().length();

}

// 增加日志的开销20字节
自我介绍一下,小编13年上海交大毕业,曾经在小公司待过,也去过华为、OPPO等大厂,18年进入阿里一直到现在。

深知大多数Java工程师,想要提升技能,往往是自己摸索成长或者是报班学习,但对于培训机构动则几千的学费,着实压力不小。自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!

因此收集整理了一份《2024年Java开发全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友,同时减轻大家的负担。img

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,基本涵盖了95%以上Java开发知识点,真正体系化!

由于文件比较大,这里只是将部分目录截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频,并且会持续更新!

如果你觉得这些内容对你有帮助,可以扫码获取!!(备注Java获取)

img

总结

面试难免让人焦虑不安。经历过的人都懂的。但是如果你提前预测面试官要问你的问题并想出得体的回答方式,就会容易很多。

此外,都说“面试造火箭,工作拧螺丝”,那对于准备面试的朋友,你只需懂一个字:刷!

给我刷刷刷刷,使劲儿刷刷刷刷刷!今天既是来谈面试的,那就必须得来整点面试真题,这不花了我整28天,做了份“Java一线大厂高岗面试题解析合集:JAVA基础-中级-高级面试+SSM框架+分布式+性能调优+微服务+并发编程+网络+设计模式+数据结构与算法等”

image

且除了单纯的刷题,也得需准备一本【JAVA进阶核心知识手册】:JVM、JAVA集合、JAVA多线程并发、JAVA基础、Spring 原理、微服务、Netty与RPC、网络、日志、Zookeeper、Kafka、RabbitMQ、Hbase、MongoDB、Cassandra、设计模式、负载均衡、数据库、一致性算法、JAVA算法、数据结构、加密算法、分布式缓存、Hadoop、Spark、Storm、YARN、机器学习、云计算,用来查漏补缺最好不过。

image

《互联网大厂面试真题解析、进阶开发核心学习笔记、全套讲解视频、实战项目源码讲义》点击传送门即可获取!
分布式+性能调优+微服务+并发编程+网络+设计模式+数据结构与算法等”

[外链图片转存中…(img-i5jhXzZv-1713317720364)]

且除了单纯的刷题,也得需准备一本【JAVA进阶核心知识手册】:JVM、JAVA集合、JAVA多线程并发、JAVA基础、Spring 原理、微服务、Netty与RPC、网络、日志、Zookeeper、Kafka、RabbitMQ、Hbase、MongoDB、Cassandra、设计模式、负载均衡、数据库、一致性算法、JAVA算法、数据结构、加密算法、分布式缓存、Hadoop、Spark、Storm、YARN、机器学习、云计算,用来查漏补缺最好不过。

[外链图片转存中…(img-htiIpqyy-1713317720364)]

《互联网大厂面试真题解析、进阶开发核心学习笔记、全套讲解视频、实战项目源码讲义》点击传送门即可获取!

  • 8
    点赞
  • 30
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值