Mac搭建canal+kafka

最新推荐文章于 2023-10-27 10:02:17 发布

csdn_xpw

最新推荐文章于 2023-10-27 10:02:17 发布

阅读量1.3k

点赞数

分类专栏： canal

本文链接：https://blog.csdn.net/csdn_xpw/article/details/111033275

版权

本文详细介绍了如何在Mac环境中搭建Canal，并配置监听数据库（MySQL）的变化，将这些变化信息推送至Kafka。首先，需要准备JDK、MySQL和SpringBoot集成Kafka的环境。接着，通过下载canal-admin和canal-deployer进行安装，修改相应配置文件并启动。最后，在canal-admin UI中配置监听数据库的信息，包括服务器、数据库监听账号和实例信息，确保MySQL已开启Binlog功能并授权Canal账号。

摘要由CSDN通过智能技术生成

Mac搭建canal+kafka

环境准备

环境准备

本文要演示的是，如何在Mac本地搭建一套canal来监听DB变化,并将变化信息推送到kafka的方案。因此需要先安装本地的一些依赖环境, 如JDK、MySQL、kafka、canal、springboot搭建等。本文重点讲解如何搭建canal,其他依赖请参考之前我分享过的博文~

一、JDK\MySQL

自行谷歌

二、springboot集成kafka

springboot集成kafka请点此移步

三、canal搭建

1、下载canal相关包

canal-admin（新版本加入进来WEB-UI管理节点、实例等配置）

wget https://github.com/alibaba/canal/releases/download/canal-1.1.4/canal.admin-1.1.4.tar.gz

canal-deployer （canal真正的server）

wget https://github.com/alibaba/canal/releases/download/canal.deployer-1.1.4.tar.gz

2、canal-admin安装

解压缩
下载包后解压.本文以/Users/admin/study为示例,如下不再提示

cd /Users/admin/study
mkdir canal-admin
解压
tar zxvf canal.admin-$version.tar.gz  -C canal-admin

修改配置
在/Users/admin/study/canal-admin/conf目录下的application.yml需要修改

server:
  port: 8089
spring:
  jackson:
    date-format: yyyy-MM-dd HH:mm:ss
    time-zone: GMT+8

spring.datasource:
  address: 127.0.0.1:3306   ## admin部署所在机器
  database: canal_manager  ## 默认的,因为这里需要导入canal部署及运行所需要的内置数据
  username: root  ## canal_manager库所在你的db对应的账号、密码
  password: root
  driver-class-name: com.mysql.jdbc.Driver
  url: jdbc:mysql://${spring.datasource.address}/${spring.datasource.database}?useUnicode=true&characterEncoding=UTF-8&useSSL=false
  hikari:
    maximum-pool-size: 30
    minimum-idle: 1

canal:
  adminUser: admin
  adminPasswd: admin  ## 【注意】canal的adminPasswd并不是登陆admin的密码，登陆admin的密码是设置在数据库中的，默认为123456

启动

/Users/admin/study/canal-admin/bin目录下执行

sh bin/startup.sh

看下/Users/admin/study/canal-admin/logs/admin.log

验证

http://127.0.0.1:8089/

账号\密码 admin\123456

在这里插入图片描述

canal-deployer安装

解压缩
下载包后解压.本文以/Users/admin/study为示例,如下不再提示

cd /Users/admin/study
mkdir canal-deployer
解压
tar zxvf canal.admin-$version.tar.gz  -C canal-deployer

todo

修改配置
在/Users/ad

最低0.47元/天解锁文章