sendthemessage报错_canal对接RocketMQ消息过大时报错：org.apache.rocketmq.client.exception.MQClientException: CODE...

最新推荐文章于 2024-04-28 14:17:51 发布
最新推荐文章于 2024-04-28 14:17:51 发布
阅读量1.9k 收藏
点赞数
文章标签： sendthemessage报错
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_40005454/article/details/113540228
版权

environment

canal version 1.1.3

mysql version 5.7.20

Issue Description

canal上游监控数据库中新闻信息表，下游对接RocketMQ，消息过大时报错

调整 canal.mq.canalBatchSize 参数为1 还是报错

2019-03-21 11:41:34.581 [pool-8-thread-1] ERROR com.alibaba.otter.canal.rocketmq.CanalRocketMQProducer - send flat message to hashed partition error

org.apache.rocketmq.client.exception.MQClientException: CODE: 13 DESC: the message body size over max value, MAX: 4194304

For more information, please visit the url, http://rocketmq.apache.org/docs/faq/

at org.apache.rocketmq.client.Validators.checkMessage(Validators.java:99) ~[rocketmq-client-4.3.2.jar:4.3.2]

at org.apache.rocketmq.client.impl.producer.DefaultMQProducerImpl.sendSelectImpl(DefaultMQProducerImpl.java:1033) ~[rocketmq-client-4.3.2.jar:4.3.2]

at org.apache.rocketmq.client.impl.producer.DefaultMQProducerImpl.send(DefaultMQProducerImpl.j

最低0.47元/天 解锁文章
weixin_40005454
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
kafka处理超大消息的配置 org.apache.kafka.common.errors.RecordTooLargeException
01-07
在使用 canal 和kafka处理数据同步时canal日志提示如下异常： java.lang.RuntimeException: java.util.concurrent.ExecutionException: org....原因是消息过大无法处理 第一步：修改 canal/conf/canal.properties配置
rocketmq报错之消息体过大
旋转星球的博客
02-28 355
这是因为链接的rocket配置了消息体大小限制，默认是4194304即4M,但是实际运行的时候配置。配置canal往rocketmq写消息，但是发现没有数据过去，查看报错如下。注释掉配置文件里的指定值，让它走默认后就ok了。
RocketMq报错：the message is illegal, maybe msg body or properties length not matched
仰望星空
01-13 6115
RocketMq：org.apache.rocketmq.client.exception.MQBrokerException: CODE: 13 DESC: the message is illegal, maybe msg body or properties length not matched. msg body length limit 128k, msg properties length limit 32k.
测试环境里由于发送MQ数据过大产生的问题
最新发布
CodeV的博客
04-28 365
前几天在测试环境中，测试测试一个业务需要发送大数据给MQ，其他服务收到数据后进行处理数据。本来在业务量比较小，现场是没有这种问题的，但是测试环境经过无数轮疯狂造数据（你懂的），然后发送到MQ的数据就变的比较大了，最后通过排查发现是RocketMQ设置了发送最大消息的配置，详细如下分析：（以下报文和代码都是本地自己复现的示例） 很明显，报错【 Caused by CODE: 13 DESC: the message body size over max value, MAX: 4194304】，意思是请求体
Springboot2.X 集成 RocketMQ
itjavaee的博客
08-30 1108
废话少说，上才艺 springboot 版本：2.3.3.RELEASE rocketmq-client版本：4.7.1 docker 搭建 rockerMq 教程：https://blog.csdn.net/itjavaee/article/details/108280613 码云链接：后面补上 文章参考：https://blog.csdn.net/u010975270/article/details/104911353/非常感谢 1.首先导入maven依赖（请自行选择对应的版本） &lt.
rocketmq发送 the message body size over max value, MAX: 4194304
jimmy609的专栏
05-16 4531
rocketmq
MQ46# 实战|RocketMQ分区阻塞应急处理
gaoliang1719的专栏
11-22 1158
一、现象反馈同事发现一个主题的某个分区卡主不再消费，如下图所示，通常这种情况是客户端消费线程阻塞造成的。而这次确不是，而且该现象还是头一次遇到，邪乎。二、问题定位1.日志分析在消费客户端发...
RocketMQ报错：org.apache.rocketmq.client.exception.MQBrokerException
qq_47305937的博客
08-10 3784
“borker‘s disk full
canal-canal-1.1.4_canal_K._产品_
09-30
名称：canal [k?'n?l]译意： 水道/管道/沟渠产品定位： 基于数据库增量日志解析，提供增量数据订阅和消费关键词： MySQL binlog parser / real-time / queue&topic / index build
canal.adapter 运行异常： com.alibaba.druid.pool.DruidDataSource 解决办法
04-11
将 client-adapter.es7x-1.1.5-jar-with-dependencies.jar 替换plugin下的jar可以解决druid报错问题，注意版本1.1.5，不是这个版本不一定能解决
canal.deployer-1.1.0.tar.gz
10-09
《阿里Canal部署工具canal.deployer-1.1.0详解》 阿里Canal是一款高效、稳定且轻量级的数据库增量复制框架，主要用于实现MySQL数据库的数据实时同步到其他数据存储系统，如Elasticsearch、HBase或RocketMQ等。Canal...
canal.adapter-1.1.5和canal.adapter-1.1.5
07-30
稳定，解决class com.alibaba.druid.pool.DruidDataSource cannot be cast to class com.alibaba.druid.pool.DruidDataSource 报错问题
the message is illegal, maybe msg body or properties length not matched. msg body length limit 128k,
张俊杰 的博客
10-23 1438
RocketMq错误分析 Exception in thread "main" org.apache.rocketmq.client.exception.MQBrokerException: CODE: 13 DESC: the message is illegal, maybe msg body or properties length not matched. msg body length limit 128k, msg properties length limit 32k. For more i
Canal1.1.6发送MySql的binlog日志到Rocketmq(2)
chy2z的专栏
05-04 704
本文介绍阿里巴巴 MySQL binlog 增量订阅&消费组件Canal采集MySQL的binlog日志发送到RocketMQ的环境搭建过程
RocketMQ（06）——消息的批量发送和消费
Elim的博客
03-08 6664
消息的批量发送和消费 发送 生产者进行消息发送时可以一次发送多条消息，这对于体积比较小的消息而言会大大改善性能，可以想象原本发送10条消息需要传递10次，现在只需要传递一次。这可以通过调用send()时传递一个消息集合。比如下面这样。批量发送的消息必须拥有相同的Topic，且一次发送的消息的body的总体积不能超过4MB，否则会得到异常——org.apache.rocketmq.client.ex...
如何解决：org.apache.rocketmq.client.exception.MQClientException: No route info of this topic, TopicTest
Sonihr的犀牛园
07-02 6706
Github上的回复也是本人，亲测有效。 以windows为例： 第一步启动namesrv 语句为：mqnamesrv.cmd -n localhost:9876 第二步启动broker 语句为：mqbroker.cmd -n localhost:9876 autoCreateTopicEnable=true & [外链图片转存失败(img-rYD6cTyh-1562059114176)...
RocketMQ学习笔记（8）----RocketMQ的Producer API简介
Teddies10081008的博客
11-13 254
在RocketMQ中提供了三种发送消息的模式： 　　1.NormalProducer（普通） 　　2.OrderProducer（顺序） 　　3.TransactionProducer（事务） 下面来介绍一下producer中的各个API的使用： 　　1. producerGroup：Producer组名， 默认值为DEFAULT_PRODUCER，多个Producer如果属于...
RocketMQ报错总结
manba_out的博客
09-20 5310
RocketMQ报错总结
项目启动时，rocketMQ发送失败
qq_34826261的博客
03-01 8574
rocketMQ报错分析及解决：The producer service state not OK, CREATE_JUST

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值