canal-adapter升级1.1.5踩过的坑

最新推荐文章于 2024-04-15 08:58:08 发布
最新推荐文章于 2024-04-15 08:58:08 发布
阅读量2k 收藏 4
点赞数 2
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/chshzh2000/article/details/118491050
版权
在升级canal adapter到1.1.5版本时遇到了配置问题和DruidDataSource的jar包依赖冲突。为解决adapter连不上数据源的问题，需在application.yml配置中添加'http://'。此外，DruidDataSource导致的数据变更无法写入ES，需修改canal源码的pom文件，添加provided，打包后替换原有jar文件并重启adapter。
摘要由CSDN通过智能技术生成

前两天升级canal adapter 1.1.5版本时碰到了canal源码自身存在的问题，被困扰了好久，现总结出来希望新进者不要再踩这些坑了

1、adapter目标数据源配置问题：

adapter的application.yml配置文件hosts配置必须加https全路径，

上图adapter的application.yml的配置在1.1.5 beta版本中没有问题，但更新到1.1.5 release版本就连不上，必须加上http://，如下图所示：

2.DruidDataSource jar包依赖冲突问题

该问题会导致源数据变更了，但无法写入es中，这个需要下载canal 源码包，修改client-adapter escore模块下的pom文件，对应位置加上<scope>provided</sco

最低0.47元/天 解锁文章
春秋2000
关注
  • 2
    点赞
  • 踩
  • 4
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
canal-adapter-1.1.5
03-18
《Canal Adapter 1.1.5：数据库变更数据捕获与适配的深度解析》 在IT行业中，数据同步和处理是常见的需求，尤其是在分布式系统中。Canal是一款由阿里巴巴开源的、针对MySQL数据库的 binlog 日志解析工具，主要用于...
canal1.1.6版本的adapter运行异常：java.nio.ByteBuffer.clear()Ljava/nio/ByteBuffer
m0_46599017的博客
11-22 1251
java.nio.ByteBuffer.clear()Ljava/nio/ByteBuffer
18 张图手把手教你使用 Canal Adapter 同步 MySQL 数据到 ES8，建议收藏！
最新发布
Wewe的博客
04-15 1172
今天给大家完成的演示了一下如何将MySQL的数据通过同步到ES，功能很强大，但是实操的过程中还是会遇到很多问题的，感兴趣的小伙伴一定要自己动手实操一下，相信会有收获的。
canal搭建及其常见错误
jiangxiaocan123的博客
07-22 2780
心得 闲来无事看到阿里巴巴的canal可以增量同步mysql的数据到es，然后就去尝试搭建了一下。然后由于自己的自作聪明和傻浪费了一个晚上时间。再次分享一下自己的心得体会，如果有人也走了这个弯路记得避免踩这些坑。 搭建流程 1、创建canal-server端 https://github.com/alibaba/canal/wiki/QuickStart github上面已经写得很清楚了，按照教程...
canal-adapter踩坑
YG_wangxinA的博客
08-27 535
canal-adapter启动时提示：com.mysql.jdbc.exceptions.jdbc4.CommunicationsException: Communications link failure
canal es适配器
weixin_43931625的博客
07-07 1769
canal es适配器
canal.adapter-1.1.5和canal.adapter-1.1.5
07-30
稳定，解决class com.alibaba.druid.pool.DruidDataSource cannot be cast to class com.alibaba.druid.pool.DruidDataSource 报错问题
canal-canal-1.1.5-alpha-2.zip ；canal-server、adapter、admin
04-10
canal-adapter：相当于canal的客户端，会从canal-server中获取数据，然后对数据进行同步，可以同步到MySQL、Elasticsearch和HBase等存储中去。 canal-admin：为canal提供整体配置管理、节点运维等面向运维的功能，...
canal-1.1.5 全套
03-27
包含canal全套资源包含以下 canal.adapter-1.1.5.tar.gz canal.admin-1.1.5.tar.gz canal.deployer-1.1.5.tar.gz canal.example-1.1.5.tar.gz
canal.adapter-1.1.5.tar.gz
07-02
在本篇文章中，我们将围绕"canal.adapter-1.1.5.tar.gz"这一版本，详细探讨Canal适配器的相关知识点。 1. **Canal适配器的作用** Canal适配器是Canal项目的一部分，它的主要作用是将Canal捕获到的数据库变更事件...
canal adapter 1.1.4使用中的问题
qq_29644857的博客
12-02 2248
canal adapter 是canal 中的一个组件，canal通过拉取mysql binlog的方式提供对binlog的增量消费，canal adapter提供了es，mysql，hbase等增量消费mysql数据的能力，现使用canal adapter 1.1.4 发行版本用于mysql->es 的增量与全量同步 全量同步 Canal 本身不提供全量同步的能力，canal adapter自身通过select 全表的方式进行全量同步，在全量同步开始前，记下增量同步的位点，全量同步完成后，通过基于
canal同步数据时数据丢失
花花世界芸芸众生的博客
01-29 2244
canal同步数据时数据丢失
Canal-adapter简单介绍及部分源码解析
weixin_43914798的博客
03-25 2709
Canal-adapter简单介绍及部分源码解析
【开源实战】Canal部署常见问题：重复解析/Filter失效/消费落后
蛮三刀酱
06-11 3565
前言 Canal是阿里巴巴开源的数据库Binlog日志解析框架，主要用途是基于 MySQL 数据库增量日志解析，提供增量数据订阅和消费。 在之前我写的文章阿里开源MySQL中间件Canal快速入门中，我已经介绍了Canal的基本原理和基础使用。 在部署到生产环境的过程中，自己作为一个菜鸟，又踩了一些坑，期间做了记录和总结，并再解决后分析了下原因，便有了此文。 本文重点内容 Canal常见的三大问题原因分析及解决方案 Binlog解析错误：重复解析/DML解析为QUERY Filter失效：设置过滤器无.
canal 适配器说明
weixin_43931625的博客
07-04 2767
canal 适配器说明
Canal-adapter的简单配置
热门推荐
qq_29860591的博客
11-26 5万+
项目的需求是mysql到mysql 一、首先需要安装canal-server，之前的博客也简单写过，这就跳过了。 二、配置canal.adapter 下载canal.adapter 解压 https://github.com/alibaba/canal/releases 编辑application.yml server: port: 8081 spring: jackso...
canal数据同步（canal-adapter与canal-deployer）
Lin_XXiang的博客
12-28 1838
canal数据，mysql到mysql
canal.adapter-1.1.5-snapshot.tar.gz 下载
02-01
要下载 canal.adapter-1.1.5-snapshot.tar.gz，你可以按照以下步骤进行操作：首先，打开你的网页浏览器，然后输入以下网址：https://github.com/alibaba/canal/releases/tag/canal-1.1.5。在页面上你会找到 canal.adapter-1.1.5-snapshot.tar.gz 的下载链接。点击链接并选择“保存文件”，文件将会开始下载。你也可以使用命令行工具进行下载，首先打开命令行工具（如Terminal或Command Prompt），然后输入以下命令： wget https://github.com/alibaba/canal/releases/download/canal-1.1.5/canal.adapter-1.1.5-snapshot.tar.gz 文件将会开始下载到你的计算机上。安装完成后，你可以解压文件并按照相应的说明进行安装和配置。 希望上述内容能够帮助到你顺利下载 canal.adapter-1.1.5-snapshot.tar.gz 文件。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值