canal
1.描述
Canal是一个很好的数据库同步工具。canal是阿里巴巴旗下的一款开源项目,纯Java开发。基于数据库增量日志解析,提供增量数据订阅&消费,目前主要支持了MySQL
2.准备
canal的原理是基于mysql binlog技术,所以这里一定需要开启mysql的binlog写入功能
1.检查binlog功能是否有开启,如果显示状态为OFF表示该功能未开启,开启binlog功能
mysql> show variables like 'log_bin';
2.如果显示状态为OFF表示该功能未开启,开启binlog功能
1,修改 mysql 的配置文件 my.cnf
vi /etc/my.cnf
追加内容:
log-bin=mysql-bin #binlog文件名
binlog_format=ROW #选择row模式
server_id=1 #mysql实例id,不能和canal的slaveId重复
2,重启 mysql:
service mysql restart
3.登录mysql客户端,查看log_bin变量是否为on
4.mysql中创建canal用户
CREATE USER 'canal'@'%' IDENTIFIED BY 'canal';
GRANT SHOW VIEW, SELECT, REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO 'canal'@'%';
FLUSH PRIVILEGES;
3.安装canal
vi conf/example/instance.properties
#需要改成自己的数据库信息
canal.instance.master.address=192.168.44.132:3306
#需要改成自己的数据库用户名与密码
canal.instance.dbUsername=canal
canal.instance.dbPassword=canal
#需要改成同步的数据库表规则,例如只是同步一下表
canal.instance.filter.regex=.*\\..*
4.使用canal
1.引入依赖
<dependencies>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-web</artifactId>
</dependency>
<!--mysql-->
<dependency>
<groupId>mysql</groupId>
<artifactId>mysql-connector-java</artifactId>
</dependency>
<dependency>
<groupId>commons-dbutils</groupId>
<artifactId>commons-dbutils</artifactId>
</dependency>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-jdbc</artifactId>
</dependency>
<dependency>
<groupId>com.alibaba.otter</groupId>
<artifactId>canal.client</artifactId>
</dependency>
</dependencies>
2.Application.properties
# 服务端口
server.port=*****
# 服务名
spring.application.name=****_****
# mysql数据库连接
spring.datasource.driver-class-name=com.mysql.cj.jdbc.Driver
spring.datasource.url=jdbc:mysql://localhost:3306/****?serverTimezone=GMT%2B8
spring.datasource.username=****
spring.datasource.password=****
3.创建客户端类
完成,撒花
Canal是阿里巴巴的开源数据库同步工具,基于MySQL binlog实现增量数据订阅和消费。本文介绍了如何开启MySQL的binlog功能,创建canal用户,配置canal实例,并在Spring Boot应用中使用canal客户端进行数据同步。

21万+

被折叠的 条评论
为什么被折叠?



