Mysql --> Canal --> Kafka ,binlog数据采集通道搭建

本文介绍了如何配置MySQL开启binlog,然后利用Canal将binlog数据同步到Kafka。在Windows和Linux服务器上配置MySQL的my.ini文件,确保binlog生效。接着详细讲解Canal的canal.properties和instance.properties配置,特别是关于数据库连接和监控表的设置。最后提到了启动Kafka消费者并提供了Canal官方文档链接作为参考。
摘要由CSDN通过智能技术生成

Hello,艾薇巴蒂,欢迎来到我的CSDN博客,今天也是踩坑的一天呢…

话不多说,欢迎来到我的踩坑课堂

1.Mysql配置,先开启binlog

各位老少爷们,叔叔阿姨,兄弟姐妹们,先给各位请安…
避免踩坑我会介绍一下windows服务器和linux服务器的区别,windows服务器上先找到您的Mysql安装地址(Mysql版本我默认为5.7+) 配置文件my.ini,linux服务器如果是默认安装就
vi /etc/my.cnf
具体配置如下

[mysqld]  
log-bin=mysql-bin #添加这一行就ok  
binlog-format=ROW #选择row模式  
server_id=1 #配置mysql replaction需要定义,不能和canal的slaveId重复  

1.配置好了重启mysqld 2.配置好了重启mysqld 3.配置好了重启mysqld 重要的事说三遍

查看配置是否生效

mysql> show variables like '%bin%';
+--------------------------------------------+--------------------------------+
| Variable_name                              | Value                          |
+--------------------------------------------+--------------------------------+
| binlog_format                              | ROW                            |
| log_bin                                    | ON                             |
| log_bin_basename                           | /***/***/***/mysql-bin         |
| log_bin_index                              | /***/***/***/mysql-bin.index   |

我仅展示了以上几项关键内容哈。出现就代表开启成功了,没有就分别百度下自己用的什么版本服务器和对应开启binlog的方式。

我这边Mysql服务器是windows版本的,当时由于配置文件粘贴的配置项进去之前没有统一配置文件的编码格式,导致了mysqld一直起不来,建议各位把文件配置完了之后用notepad之类的文本编辑器打开配置文件更改下编码格式,或者配置的时候不要复制粘贴,自己手打也行,锻炼锻炼手速哈~

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值