es+canal
father_1227
往后余生种种,但愿活得生猛。
展开
-
使用canal同步mysql与ES以及代码同步缺失表id问题
canal增量同步与代码全量同步es全表缺失id问题,以及_id设置背景/问题描述:代码启动时候使用springboot启动将表数据全量同步,然后使用canal增量同步。1.canal的配置:/usr/local/canal-adapter/conf/es6:dataSourceKey: XXXouterAdapterKey: es-XXXdestination: XXXgroupId: XXesMapping: _index: XX _type: doc _id: id原创 2020-09-17 18:09:08 · 2950 阅读 · 3 评论 -
使用canal同步mysql数据到ES:日期格式问题.
使用canal同步mysql数据到数据库:日期格式问题问题:使用canal同步mysql数据到es,时间格式转换问题。常规安装部署以及使用暂不提供,百度搜一堆。。。环境:canal1.1.5,mysql8,Elasticsearch6.7当前的 canal 支持源端 MySQL 版本包括 5.1.x , 5.5.x , 5.6.x , 5.7.x , 8.0.x错误信息: java.lang.RuntimeException: ES sync commit error Elasticsear原创 2020-09-03 14:40:05 · 7344 阅读 · 4 评论