sendthemessage报错_canal对接RocketMQ消息过大时报错：org.apache.rocketmq.client.exception.MQClientException: CODE...

最新推荐文章于 2024-05-06 07:26:03 发布
最新推荐文章于 2024-05-06 07:26:03 发布
阅读量1.9k 收藏
点赞数
文章标签： sendthemessage报错
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_40005454/article/details/113540228
版权

environment

canal version 1.1.3

mysql version 5.7.20

Issue Description

canal上游监控数据库中新闻信息表，下游对接RocketMQ，消息过大时报错

调整 canal.mq.canalBatchSize 参数为1 还是报错

2019-03-21 11:41:34.581 [pool-8-thread-1] ERROR com.alibaba.otter.canal.rocketmq.CanalRocketMQProducer - send flat message to hashed partition error

org.apache.rocketmq.client.exception.MQClientException: CODE: 13 DESC: the message body size over max value, MAX: 4194304

For more information, please visit the url, http://rocketmq.apache.org/docs/faq/

at org.apache.rocketmq.client.Validators.checkMessage(Validators.java:99) ~[rocketmq-client-4.3.2.jar:4.3.2]

at org.apache.rocketmq.client.impl.producer.DefaultMQProducerImpl.sendSelectImpl(DefaultMQProducerImpl.java:1033) ~[rocketmq-client-4.3.2.jar:4.3.2]

at org.apache.rocketmq.client.impl.producer.DefaultMQProducerImpl.send(DefaultMQProducerImpl.j

最低0.47元/天 解锁文章
weixin_40005454
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
canal.adapter 运行异常： com.alibaba.druid.pool.DruidDataSource 解决办法
04-11
将 client-adapter.es7x-1.1.5-jar-with-dependencies.jar 替换plugin下的jar可以解决druid报错问题，注意版本1.1.5，不是这个版本不一定能解决
canal.deployer-1.1.0.tar.gz
10-09
《阿里Canal部署工具canal.deployer-1.1.0详解》 阿里Canal是一款高效、稳定且轻量级的数据库增量复制框架，主要用于实现MySQL数据库的数据实时同步到其他数据存储系统，如Elasticsearch、HBase或RocketMQ等。Canal...
RocketMQ-记RocketMQ启动后producer无法连接到broker的错误及解决方案
u013958151的博客
05-12 4498
背景 最近在学习RocketMQ,第一步就是安装部署并启动RocketMQ.使用最新版本的RocketMQ,版本为4.2.0,安装后启动相关服务. 启动nameServer: nohup mqnamesrv & 1 由于broker和nameServer在同一台机器上,启动broker: nohup mqbroker -n localhost:9876 & 1 接下来运行pr...
RocketMQ报错：org.apache.rocketmq.client.exception.MQBrokerException
qq_47305937的博客
08-10 3788
“borker‘s disk full
RocketMQ高手之路系列之五：RocketMQ之消息发送（二）
最新发布
m0_75232472的博客
05-06 633
自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。深知大多数Java工程师，想要提升技能，往往是自己摸索成长，自己不成体系的自学效果低效漫长且无助。因此收集整理了一份《2024年Java开发全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。
项目启动时，rocketMQ发送失败
qq_34826261的博客
03-01 8602
rocketMQ报错分析及解决：The producer service state not OK, CREATE_JUST
一篇文章彻底解决RocketMq的疑难杂症之：org.apache.rocketmq.client.exception.MQClientException: No route info of thi
热门推荐
weixin_38232096的博客
09-27 1万+
解决 一共有四个原因： 1 brocker买有连接到mqnameserv 2 producer没有连接到mqnameserv 3 topic没有创建 4 防火墙 说明： rocktMq中nameserv相当于一个zookeeper，充当一个注册的角色，所以brocker和我们的代码producer是通过nameserv来进行同行的。 brocker的启动命令中 -n xxxx:9876 就是指定 mqnameserv ，producer的代码中 也是 producer.setNamesrvAddr(“xxx
记一次rocketmq推送消息失败的问题。
qq_39859936的博客
03-14 1828
在springboot集成rocketmq完成后，启动项目时： 1. Caused by: org.apache.rocketmq.client.exception.MQBrokerException: CODE: 14 DESC: service not available now, maybe disk full, CL: 0.90 CQ: 0.90 INDEX: 0.90, maybe your broker machine memory too small. 这是由于安装brok.
RocketMQ错误消息重试策略之Producer的重试机制
Leon_Jinhai_Sun的博客
01-31 434
package cn.learn.rocketmq.error; import org.apache.rocketmq.client.producer.DefaultMQProducer; import org.apache.rocketmq.client.producer.SendResult; import org.apache.rocketmq.common.message.Messag...
kafka处理超大消息的配置 org.apache.kafka.common.errors.RecordTooLargeException
01-07
在使用 canal 和kafka处理数据同步时canal日志提示如下异常： java.lang.RuntimeException: java.util.concurrent.ExecutionException: org....原因是消息过大无法处理 第一步：修改 canal/conf/canal.properties配置
canal-canal-1.1.4_canal_K._产品_
09-30
名称：canal [k?'n?l]译意： 水道/管道/沟渠产品定位： 基于数据库增量日志解析，提供增量数据订阅和消费关键词： MySQL binlog parser / real-time / queue&topic / index build
canal.adapter-1.1.5和canal.adapter-1.1.5
07-30
稳定，解决class com.alibaba.druid.pool.DruidDataSource cannot be cast to class com.alibaba.druid.pool.DruidDataSource 报错问题
RocketMQ启动后producer无法连接到broker的错误及解决方案
qq1067012060的博客
05-06 1038
1.防火墙设置 1.开启防火墙 systemctl start firewalld 2.设置打开的端口号（永久打开） firewall-cmd --add-port=9876/tcp --permanent firewall-cmd --add-port=10911/tcp --permanent firewall-cmd --add-port=10909/tcp --permanent 3.更新一下：在设置好端口后，需要执行 firewall-cmd --reload 4.查看已经打开的端口 firewa
解决：rocketmq启动报错_Cannot allocate memory
春风化雨
12-08 2377
1、rocketmq节点启动报错 [root@iZ2zec40jfnlxk4e70dsqkZ rocketmq]# Java HotSpot(TM) 64-Bit Server VM warning: INFO: os::commit_memory(0x00000006c0000000, 4294967296, 0) failed; error='Cannot allocate memory' ...
RocketMq报错：the message is illegal, maybe msg body or properties length not matched
仰望星空
01-13 6135
RocketMq：org.apache.rocketmq.client.exception.MQBrokerException: CODE: 13 DESC: the message is illegal, maybe msg body or properties length not matched. msg body length limit 128k, msg properties length limit 32k.
rocketmq发送 the message body size over max value, MAX: 4194304
jimmy609的专栏
05-16 4557
rocketmq
the message is illegal, maybe msg body or properties length not matched. msg body length limit 128k,
张俊杰 的博客
10-23 1443
RocketMq错误分析 Exception in thread "main" org.apache.rocketmq.client.exception.MQBrokerException: CODE: 13 DESC: the message is illegal, maybe msg body or properties length not matched. msg body length limit 128k, msg properties length limit 32k. For more i
RocketMQ学习笔记（8）----RocketMQ的Producer API简介
Teddies10081008的博客
11-13 254
在RocketMQ中提供了三种发送消息的模式： 　　1.NormalProducer（普通） 　　2.OrderProducer（顺序） 　　3.TransactionProducer（事务） 下面来介绍一下producer中的各个API的使用： 　　1. producerGroup：Producer组名， 默认值为DEFAULT_PRODUCER，多个Producer如果属于...
【CANAL】canal 针对message过大无法写入kafka解决方案
Zsigner的博客
12-23 2914
背景：在canal.instance.log中看到message过大，无法写入kafka 报错log： [pool-348-thread-5] ERROR c.a.o.canal.connector.kafka.producer.CanalKafkaProducer - java.util.concurrent.ExecutionException: org.apache.kafka.common.errors.RecordTooLargeException: The request includ.
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值