Canal监控MySQL数据到Kafka详细步骤(jdk+zookeeper+kafka+canal+mysql)

一、前言

以下步骤是通过一台虚拟机搭建的单节点jdk+zookeeper+kafka+canal+mysql集群环境，搭建完成可通过canal监控mysql数据库数据发送到kafka。

二、环境准备

环境：虚拟机 centos7 全程为root操作权限 由于是虚拟机我们这里直接关闭防火墙，如果是服务器建议只开放指定端口（注意有的需要配置安全组） 1、在虚拟机中打开终端查看ip

ifconfig
复制代码

2、用xshell连接上虚拟机 3、关闭防火墙

systemctl stop firewalld # 关闭防火墙
复制代码

补充：
systemctl status firewalld # 查看防火墙状态
systemctl start firewalld # 打开防火墙
systemctl restart firewalld # 重启防火墙
复制代码

三、安装JDK

1、查看是否有默认安装的jdk

java -version
复制代码

2、卸载默认安装的jdk

yum list installed | grep java # 查询已安装的jdk信息
yum -y remove 自带openjdk # 卸载
复制代码

3、创建文件夹放我们的安装包以及安装位置

cd /
mkdir app
cd app
mkdir installationPackage #放安装包
cd ../
mkdir path # 安装位置
复制代码

4、将我们用到的压缩包通过xftp上传到服务器的/app/installationPackage目录下 5、解压jdk到/app/path目录下

tar -zxvf /app/installationPackage/jdk-8u221-linux-x64.tar.gz -C /app/path
复制代码

6、进入到/app/path目录下将jdk1.8.0_221文件夹更名为jdk

mv jdk1.8.0_221 ./jdk
复制代码

7、配置环境变量

vim /etc/profile
复制代码

按i进入到insert模式，在文件最下方输入

# java 环境变量
export JAVA_HOME=/app/path/jdk
CLASSPATH=$JAVA_HOME/lib/
PATH=$PATH:$JAVA_HOME/bin
export PATH JAVA_HOME CLASSPATH
复制代码

8、让环境变量生效

source /etc/profile
复制代码

9、测试jdk是否安装成功

java -version
复制代码

四、安装zookeeper

1、把zookeeper的压缩包传到/app/installationPackage目录下 2、解压到/app/path目录下

tar -zxvf apache-zookeeper-3.5.9-bin.tar.gz -C ../path/
复制代码

3、进入到/app/path目录下将apache-zookeeper-3.5.9更名为zookeeper

cd /app/path
mv apache-zookeeper-3.5.9 /zookeeper
复制代码

4、进入到/app/path/zookeeper/conf目录下，把zoo_sample.cfg 文件复制并重命名为 zoo.cfg 文件

cd /app/path/zookeeper/conf
cp zoo_sample.cfg zoo.cfg
复制代码

5、修改zoo.cfg文件

vim zoo.cfg
复制代码

修改dataDir

dataDir=/app/path/zookeeper/data
# 在文件最下方加如下内容
server.0=localhost:2888:3888
复制代码