MySQL主从同步，及Canal实时数据库同步

 

（一）MySQL主从同步

1.简介

     Linux下MySQL数据库的主从同步用来实现读写分离。主数据库进行数据的插入，删除与更新；从数据库专门用来查询操作，缓解数据库的压力。

2.主从同步原理

     Mysql主从同步是基于二进制日志机制，master通过二进制日志来记录数据库的变动情况，slave通过读取和执行该日志文件来保持和主服务器的数据一致。

     Mysql主从同步，通常采用异步复制，从master复制到slave，由三个线程来完成。其中sql线程和IO线程在slave端，另一个IO线程在master端，要实现MySQL的replication首先需要打开master端的二进制log功能:

(1) master 将操作记录到二进制日志(binary log)中；
(2) master有一个I/O线程将二进制日志发送到slave；
(3) slave IO 线程 将master的binary log events读写到它的转送日志(relay log)；
(4) slave SQL进程读取relay log，将变更记录数据到slave数据库中。

结构图

 

3. 配置主从同步的基本步骤

1. 在主服务器上，必须开启二进制日志机制和配置一个独立的ID
2. 在每一个从服务器上，配置一个唯一的ID，创建一个用来专门复制主服务器数据的账号
3. 在开始复制进程前，在主服务器上记录二进制文件的位置信息
4. 如果在开始复制之前，数据库中已经有数据，就必须先创建一个数据快照（可以使用mysqldump导出数据库，或者直接复制数据文件）
5. 配置从服务器要连接的主服务器的IP地址和登陆授权，二进制日志文件名和位置

4.主从数据库配置

 1.操作步骤

  1）开启master的二进制日志

  2）开启slave的二进制日志

  3）将slave指向master 

  4）开始复制

 2.开启master二进制日志

1）编辑mysql配置文件

1 [root@ ~]# vi /etc/my.cnf

2）添加二进制日志配置，开启二进制（mysql-bin只是二进制日志名称，可以自行指定）

1 server-id=1             #id是一定要指定的，是唯一的标识（master数据库要比slave数据库的id优先级高才行）
2 log-bin=mysql-bin       #开启二进制日志

3）授权

登录数据库

需要给slave数据库配置一个用户/密码的权限

1 mysql> grant replication slave on *.* to 'root'@'slave数据库ip' identified by '密码';

允许某个ip地址的某个用户以某个密码对当前数据库的所有库和表进行复制操作

配置之后需要刷新权限

1 mysql> flush privileges;

上面修改配置文件需重启服务

1 [root@ ~]# service mysqld restart

4）查看master的状态

登录数据库

1 mysql> show master status;

file：是日志文件名称

position：日志所在位置

 3.开启slave的二进制日志

 登录slave服务器

1）配置my.cnf配置文件

1 [root@ ~]# vi /etc/my.cnf

2）添加slave二进制日志配置，开启二进制（mysql-bin只是二进制日志名称，可以自行指定）

1 server-id=2
2 log-bin=mysql-bin

注意：每一台指定唯一的一个server-id标识

修改完配置服务需重启服务

1 [root@V