canal 无法得到数据库消息 ，接收不到消息

最新推荐文章于 2024-04-10 17:48:19 发布
最新推荐文章于 2024-04-10 17:48:19 发布
阅读量4.4k 收藏 8
点赞数 1
分类专栏： 中间件  个人学习 文章标签： canal 中间件 缓存同步
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_39793790/article/details/102649100
版权

canal 无法得到数据库消息 ，接收不到消息

数据库版本 5.5.62
canal 版本1.1.3

canal 部署在linux 上 tomcat 部署了一个java web 项目，程序会自动连接canal 。

在windwos 上一切正常，调试都行，部署在 linux 上 出现 问题了 ，时而可以监控消息，时而监控不到消息。问题很奇怪。

数据库库canal 用户也已经开启了 网上所说的模式。也能查询到日志。

问题在于 canal.properties 配置文件 有一行的注释没有打开

请看下方图片
在这里插入图片描述
把这个注释打开，然后重启启动项目，问题解决，canal 可以正常拿到消息了。不会出现拿不到消息的情况。

forever14998
关注
  • 1
    点赞
  • 踩
  • 8
    收藏
    觉得还不错? 一键收藏
  • 5
    评论
专栏目录
canal 修改mysql数据后Java客户端接受不到数据的解决办法
laozhang0910的博客
04-30 1146
https://blog.csdn.net/lt326030434/article/details/84576544 第一种方法成功的 大坑
Canal 给 kafka 发消息，kafka 收不到消息问题
pymxb1991的专栏
07-14 1128
Cannal 发消息,kafka 总是收不到问题
RabbitMQ-canal 监听本地数据库 -收不到消息解决方法
最新发布
qq_65142821的博客
04-10 514
修改配置文件连接数据库的密码后重启下cancal 即可。在mysql 的ini 配置文件中加入下列代码。接着打开 navicat。重启下mysql 服务。修改加密方式 和密码。
canal客户端消费不到信息，没有异常日志，canal服务端主机不能是单核的
qq_37670707的博客
02-01 2008
部署版本：canal.deployer-1.1.3-SNAPSHOT.tar.gz mysql：正常 异常情况：canal使用客户端链接时，链接成功，但无法获取任何信息 原因：canal服务端的主机是单核，需要在多核的主机上运行才能成功。 ...
Canal 问题排查（不抓取数据）
weixin_43390992的博客
11-07 4610
问题一： ERROR c.a.otter.canal.parse.inbound.mysql.MysqlEventParser - dump address /192.168.1.50:3306 has an error, retrying. caused by com.alibaba.otter.canal.parse.exception.CanalParseException: can’t f...
canal服务运行一段时间客户端遍历不到数据
qq_27275851的博客
07-30 1362
canal：阿里巴巴的一款开源中间件，用于读取数据库binlog日志，实时发送给客户端。 问题：使用canal后运行一段时间，客户端一直轮询，但是batchId始终为-1，手动改动数据库数据后，仍然还是获取不到。 1.canal 服务读取出错了 检查canal日志关键是 logs\example下的，看是否由报错提示，入报错列不匹配，或者类型转换异常等，可能是你修改了表结构导致，直接配置tsdb数据库，然后删除meta.dat缓存即可。可参考上一篇文章 2.canal读取的binlog已被删除 这里首先要介
线上canal集群说kafka遇到大消息在报错
servepeople的博客
03-24 2953
org.apache.kafka.common.errors.RecordTooLargeException
使用canal增量同步mysql数据库信息
10-26
2. MySQL Master 接收到转储请求并开始将二进制日志推送到 slave（即 canal）。 3. Canal 将二进制日志对象解析为自己的数据类型（原始字节流）。 安装 Canal Server 要安装 Canal Server，需要下载 canal....
product-center-canal.zip
01-31
这通常涉及到Canal的Client端配置，如通过Canal Client SDK或者使用Spring Boot集成Canal，实现数据库变更事件的订阅和接收。 四、数据处理 在获取到数据库变更事件后，Canal提供了数据处理的接口，开发者可以根据...
canal-deployer-1.1.8
02-28
Canal Deployer 是阿里巴巴开源的一个高效、稳定且轻量级的数据库增量日志订阅与消费组件，主要用于实现MySQL的数据实时同步到各种数据存储或计算系统中。在这个版本1.1.8中，我们来深入探讨它的重要功能和应用场景...
canal数据异构组件包
12-27
Canal通过实时捕获MySQL的变化，实现不同数据库系统间的数据同步，如MySQL到Oracle、MySQL到Hadoop等，支持数据的横向扩展和跨平台迁移。 3. **组件包内容**：“canal.deployer-1.1.4”是Canal的一个部署版本，包含...
canal简介.ppt
02-24
【Canal简介】 Canal是阿里巴巴开源的一款针对...订阅者可以通过Canal的API或MQ来接收这些增量数据，实现数据的实时流动。在实际使用过程中，还需关注性能优化、错误处理和监控等方面，确保数据同步的稳定性和高效性。
Canal的坑你遇到了多少，全在这儿呢
热门推荐
尹忠政的博客
03-08 1万+
Canal的坑你遇到了多少，全在这里呢 修改mysql字符集 #在[client]段增加下面代码  default-character-set=utf8 #在[mysql]段增加下面的代码  character-set-server=utf8  #在[mysqld]段增加下面的代码 character-set-server=utf8 init_connect='S...
爷青回，canal 1.1.6来了，几个重要特性和bug修复
阿丸笔记
05-27 1334
刚刚在群里看到消息说，时隔一年，canal 1.1.6正式release了，赶紧上去看看有什么新特性。
canal同步异常：当表结构变化时，同步失败
jingleli21的博客
08-26 1857
canal同步异常：当表结构变化时，同步失败
Canal增量数据订阅和消费——原理详解
悟已往之不谏，知来者之可追
04-05 1107
简介 工作原理 MySQL主备复制原理 canal 工作原理 Canal-HA机制 应用场景 同步缓存 Redis /全文搜索 ES 下发任务 数据异构
canal 重启后不同步数据
Fuly的博客
03-04 2890
我把canal重启了,然后不同步数据了 service中的logs/resourcesearch/resourcesearch.log文件报错 2021-03-04 09:44:22.399 [main] INFO c.a.otter.canal.instance.spring.CanalInstanceWithSpring - start CannalInstance for 1-resourcesearch 2021-03-04 09:44:22.410 [main] WARN c.a.o.can
canal 修改mysql数据后Java客户端无反应的问题解决方案
简单随风的博客
11-28 4056
canal官方文档可以点击这里查看。 按照官网的教程完成配置后会发现，在修改mysql时java客户端还是没有反应。 原因在于需要修改一个配置，但是官网没有讲解。 进入canal解压文件 ，编辑conf/canal.properties文件 vim conf/canal.properties 有这么一行 canal.instance.parser.parallelThreadSize = 16 ...
关于canal无法连接上数据库的原因以及解决方案
weixin_44765605的博客
10-18 4865
问题： 今天我第一次用canal，步骤都是按照一个视频的来，视频中没有出错并且能成功同步本机和虚拟机linux上的数据库，但是我这里却一直不成功。于是我就去查看日志： 我找到关键词：caching_sha2_password Auth failed，上网查了一下，原来是和数据库版本不同而导致数据库用户的密码加密方式不同的原因。 解决方案： 参考链接：https://www.jianshu.com/p/3d1e877b0dce 在canal连接的linux的mysql上（模拟远程数据库）用以下两行命令：
docker 部署canal 并且同步消息到rocketmq
06-11
好的，我可以为您提供一些基本的步骤，但需要注意的是，您需要确保您的服务器已经正确安装了 Docker 和 RocketMQ。 1. 拉取 canal 和 canal-server 镜像 ``` docker pull canal/canal-server:v1.1.4 docker pull canal/canal-admin:v1.1.4 ``` 2. 创建 canal 配置文件 在本地创建一个 canal 目录，并在其中创建一个配置文件 `instance.properties`，内容如下： ``` canal.instance.master.address=127.0.0.1:3306 canal.instance.dbUsername=xxxx canal.instance.dbPassword=xxxx canal.instance.connectionCharset=UTF-8 canal.instance.tsdb.enable=true canal.instance.gtidon=false canal.instance.filter.regex=.*\\..* ``` 其中，`canal.instance.master.address` 需要指定 MySQL 数据库的地址和端口，`canal.instance.dbUsername` 和 `canal.instance.dbPassword` 则是 MySQL 数据库的用户名和密码。 3. 启动 canal-server 使用以下命令启动 canal-server： ``` docker run -p 11111:11111 \ -v /path/to/canal:/canal \ --name canal-server \ -d canal/canal-server:v1.1.4 \ sh /canal/bin/startup.sh ``` 其中，`/path/to/canal` 是您本地的 canal 目录路径。 4. 创建 RocketMQ 镜像 如果您的服务器中没有 RocketMQ 镜像，可以使用以下命令创建： ``` docker pull rocketmqinc/rocketmq:4.9.1 ``` 5. 创建 RocketMQ 容器 使用以下命令创建 RocketMQ 容器： ``` docker run -d \ --name rmqnamesrv \ -p 9876:9876 \ -v /path/to/store/namesrv/logs:/root/logs \ -v /path/to/store/namesrv/store:/root/store \ rocketmqinc/rocketmq:4.9.1 \ sh mqnamesrv ``` 其中，`/path/to/store/namesrv/logs` 和 `/path/to/store/namesrv/store` 分别是您本地用于存储 RocketMQ 日志和数据的路径。 6. 创建 RocketMQ Producer 镜像 如果您的服务器中没有 RocketMQ Producer 镜像，可以使用以下命令创建： ``` docker pull rocketmqinc/rocketmq-console-ng:2.0.0 ``` 7. 启动 RocketMQ Producer 容器 使用以下命令启动 RocketMQ Producer 容器： ``` docker run -d \ -e "JAVA_OPTS=-Drocketmq.namesrv.addr=127.0.0.1:9876 -Dcom.rocketmq.sendMessageWithVIPChannel=false" \ --name rmqproducer \ -p 8080:8080 \ rocketmqinc/rocketmq-console-ng:2.0.0 ``` 其中，`-Drocketmq.namesrv.addr` 指定了 RocketMQ 的地址和端口。 8. 在 Canal 中配置 RocketMQ 同步 进入到 `canal-admin` 的管理界面，创建一个实例，并配置同步规则，将数据同步到 RocketMQ 中。 以上就是部署 Canal 并同步消息到 RocketMQ 的基本步骤，具体实现还需要根据您的实际情况进行调整。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 5
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值