【RocketMQ每日一问】RocketMQ消息追踪如何实现的?

1.概述

RocketMQ 的消息追踪功能是在 4.3.0 版本中引入的。在这个版本中,RocketMQ 引入了一个名为 Tracing 的模块,用于实现消息追踪功能。

Tracing 模块基于 Opentracing 标准实现,提供消息追踪的功能,可以帮助用户追踪消息的生产和消费过程,以及定位潜在的性能问题和错误。

Tracing 模块包括生产者追踪、消费者追踪和消息事务追踪三种模式。生产者追踪可以追踪消息的发送过程,消费者追踪可以追踪消息的消费过程,消息事务追踪可以追踪消息事务的执行过程。

在消息追踪功能中,消息会被标记上一个 Trace ID,这个 Trace ID 可以跨越整个消息的生产和消费过程,从而实现对消息的全链路追踪和监控。同时,RocketMQ 还提供了相关的工具和接口,方便用户对消息追踪数据进行收集和分析。

2.生产trace

  1. 生产者开启消息追踪
    DefaultMQProducer producer = new DefaultMQProducer(PRODUCER_GROUP, true);
  2. 开启之后会注册两个hook,一个正常发消息的,一个是事务消息的

    AsyncTraceDispatcher dispatcher = new AsyncTraceDispatcher(producerGroup, TraceDispatcher.Type.PRODUCE, customizedTraceTopic, rpcHook);
                    dispatcher.setHostProducer(this.defaultMQProducerImpl);
                    traceDispatcher = dispatcher;
                    this.defaultMQProducerImpl.registerSendMessageHook(
                        new SendMessageTraceHookImpl(traceDispatcher));
                    this.defaultMQProducerImpl.registerEndTransactionHook(
                        new EndTransactionTraceHookImpl(traceDispatcher));
  3. org.apache.rocketmq.client.trace.hook.SendMessageTraceHookImpl这个里面记录了追踪消息的格式,并且发送完成消息之后调用hook,将追踪消息记录到一个traceContextQueue中

  4. 然后有任务拿出来,达到4M之后AsyncDataSendTask异步发送到默认追踪topic中RMQ_SYS_TRACE_TOPIC

追踪消息的格式

 org.apache.rocketmq.client.trace.TraceContext

3.消费trace

  1. 同样的在消费者启动的时候注册了一个hookorg.apache.rocketmq.client.trace.hook.ConsumeMessageTraceHookImpl#ConsumeMessageTraceHookImpl
  2. 同样的在ConsumeMessageTraceHookImpl类中构造出追踪context,不同的是contextType为ConsumeContextType
  3. 然后放入traceContextQueue中
  4. 然后有任务拿出来,达到4M之后AsyncDataSendTask异步发送到默认追踪topic中RMQ_SYS_TRACE_TOPIC

4.生产者追踪消息和消费者的追踪消息如何关联起来

在 RocketMQ 中,生产者发送的追踪消息和消费者发送的追踪消息通过msgId 属性值进行关联。在生产者发送消息时,生成一个唯一的 msgId,并将其作为 Trace 数据中的 msgId属性值保存到消息中。在消费者消费消息时,消费者会从消息中取出 msgId属性值,并将其作为 msgId属性 值,用于查询和匹配 Trace 数据。通过 msgId 属性值,可以将生产者发送的追踪消息和消费者发送的追踪消息进行关联,实现对消息全链路的追踪和监控。

  • 46
    点赞
  • 45
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
好的,下面是使用RocketMQ实现一个简单的消息队列的步骤: 1. 下载RocketMQ 首先你需要从RocketMQ官网下载RocketMQ压缩包,并解压到你的本地目录。 2. 启动Name Server和Broker 在解压后的RocketMQ目录下,进入bin目录,执行以下命令启动Name Server和Broker: ``` sh mqnamesrv sh mqbroker -n localhost:9876 ``` 3. 创建Topic 在RocketMQ中,消息是发布到Topic中的,所以你需要先创建一个Topic。可以使用RocketMQ提供的命令行工具创建Topic: ``` sh bin/mqadmin updateTopic -n localhost:9876 -t testTopic ``` 4. 发送消息 使用Producer发送消息到Topic中,以下是Java代码示例: ```java import org.apache.rocketmq.client.producer.DefaultMQProducer; import org.apache.rocketmq.common.message.Message; public class Producer { public static void main(String[] args) throws Exception { DefaultMQProducer producer = new DefaultMQProducer("producer_group"); producer.setNamesrvAddr("localhost:9876"); producer.start(); Message msg = new Message("testTopic", "tagA", "Hello RocketMQ".getBytes()); producer.send(msg); producer.shutdown(); } } ``` 5. 消费消息 使用Consumer消费Topic中的消息,以下是Java代码示例: ```java import org.apache.rocketmq.client.consumer.DefaultMQPushConsumer; import org.apache.rocketmq.client.consumer.listener.ConsumeConcurrentlyContext; import org.apache.rocketmq.client.consumer.listener.MessageListenerConcurrently; import org.apache.rocketmq.common.message.MessageExt; import java.util.List; public class Consumer { public static void main(String[] args) throws Exception { DefaultMQPushConsumer consumer = new DefaultMQPushConsumer("consumer_group"); consumer.setNamesrvAddr("localhost:9876"); consumer.subscribe("testTopic", "*"); consumer.registerMessageListener(new MessageListenerConcurrently() { @Override public ConsumeConcurrentlyStatus consumeMessage(List<MessageExt> msgs, ConsumeConcurrentlyContext context) { for (MessageExt msg : msgs) { System.out.println(new String(msg.getBody())); } return ConsumeConcurrentlyStatus.CONSUME_SUCCESS; } }); consumer.start(); System.out.println("Consumer started."); } } ``` 以上就是使用RocketMQ实现简单消息队列的步骤。当然,还有很多高级特性,比如延时消息、事务消息等,你可以自行了解和实践。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

小丸子呢

致力于源码分析,期待您的激励

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值