MySQL主从介绍
* MySQL主从又叫做Replication、AB复制。简单讲就是A和B两台机器做主从后,在A上写数据,另外一台B也会跟着写数据,两者数据实时同步的
* MySQL主从是基于binlog的,主上须开启binlog才能进行主从。
* binlog,其实就是一个文件,文件里记录了一些日志,文件是 二进制文件,无法cat
* 主从过程大致有3个步骤
* 主将更改操作记录到binlog里
* 从将主的binlog事件(sql语句)同步到从本机上并记录在relaylog里
* relaylog,中文叫做 中继日志
* 从根据relaylog里面的sql语句按顺序执行
* mysql主从共有三个线程
* 主上有一个log dump线程,用来和从的I/O线程传递binlog
* 从上有两个线程,其中I/O线程用来同步主的binlog并生成relaylog,另外一个SQL线程用来把relaylog里面的sql语句落地
MySQL主从原理图
mysql主从使用场景:
1. 数据备份,主机器宕机,从机器还能随时对web提供服务
2. 作为一个从库,读的库,减轻主库的压力,数据备份且可以分担主机器被调用数据时的压力,mysql主从,是有方向性的,写数据,必须从主机器开始;如果不依照原理会导致数据紊乱
17.2 准备工作
mysql安装总结
* mysql主从准备工作:
* 准备两台机器,每台机器安装msyql服务,并启动mysql服务
* mysql详细安装
1. 首先下载二进制免编译的包,下载到/usr/local/src/目录下
2. 解压压缩包
3. 解压完之后,把解压出来的目录放到 /usr/local/mysql/ 目录下
* 注意点:
* 首先检查 /usr/local/mysql/ 目录是否存在
* 若是这个目录存在,首先把这个目录改个名字,或者把目录下的内容删除
* 然后把解压出来的目录放到 /usr/local/mysql/ 目录下面
* 然后切换到 /usr/local/mysql/ 目录下,进行初始化 命令
* 初始化命令 ./scripts/mysql_install_db --user=mysql --datadir=/data/mysql
* 注意点:
* 其中的--user=mysql 需要提前创建
1. 初始化成功的标志就是两个OK,或者用 echo $? 检查是否初始化成功
2. 编辑 /etc/my.cnf 文件——>默认是自带 my.cnf 文件的
在 /etc/my.cnf 文件中
定义 datadir=/data/mysql
定义 socket=/tmp/mysql.sock
* 拷贝启动脚本
* 命令 cp /usr/local/mysql/support-files/mysql.server /etc/init.d/mysqld
* 编辑启动脚本
vim /etc/init.d/mysqld //对以下两行进行指定路径
指定basedir的路径 /usr/local/mysql
指定datadir的路径 /data/mysql
* 之后就可以启动mysql了
* 命令 /etc/init.d/mysql start
* 如果启动失败,可以去查看错误日志
* 建议 :查看 /data/mysql 目录下的文件,默认属主、属组,如果不是mysql的,启动时会因无法写入数据而不能启动mysql
* 改变属主和属组,命令 chomd mysql:mysql /data/mysql
* 然后就可以尝试启动,命令 /etc/init.d/mysql start
* 若想开机启动,只需要输入命令
* 命令 chkconfig mysqld on
主从配置 - 主上操作
* 安装mysql
* 修改my.cnf,增加server-id=130和log_bin=aminglinux1
* 修改完配置文件后,启动或者重启mysqld服务
* 把mysql库备份并恢复成aming库,作为测试数据
* mysqldump -uroot mysql > /tmp/mysql.sql
* mysql -uroot -e “create database aming”
* mysql -uroot aming < /tmp/mysql.sql
* 创建用作同步数据的用户
* grant replication slave on . to 'repl'@slave_ip identified by 'password';
* flush tables with read lock;
* show master status;
主从配置 - 主上操作
1. 在两台机器安装并启动mysql服务后,首先在主上进行操作
2. 修改/etc/my.cnf配置文件
* 在配置文件下[mysqld]下添加
* server-id=134 这个id可以自定义,这里根据ip来定义
* log_bin=yueyong123 打开binlog,名字自定义为log_bin=yueyong123 最终如下
* 更改完配置文件后,需要重启mysql
* /etc/init.d/mysqld restart
[root@yong-01 mysql]# /etc/init.d/mysqld restart
Shutting down MySQL.. SUCCESS!
Starting MySQL.. SUCCESS!
* 这时候来/data/mysql/目录下,会生成一些文件
* ls -lt /data/mysql/
[root@yong-01 mysql]# ll
总用量 110712
-rw-rw---- 1 mysql mysql 56 6月 6 20:29 auto.cnfdrwx------ 2 mysql mysql 48 6月 20 22:19 db1-rw-rw---- 1 mysql mysql 12582912 6月 28 22:48 ibdata1-rw-rw---- 1 mysql mysql 50331648 6月 28 22:48 ib_logfile0-rw-rw---- 1 mysql mysql 50331648 6月 6 20:19 ib_logfile1drwx------ 2 mysql mysql 4096 6月 20 23:00 mysqldrwx------ 2 mysql mysql 68 6月 20 23:04 mysql2drwx------ 2 mysql mysql 4096 6月 6 20:19 performance_schemadrwx------ 2 mysql mysql 6 6月 6 20:19 test-rw-rw---- 1 mysql mysql 97137 6月 28 22:48 yong-01.err-rw-rw---- 1 mysql mysql 5 6月 28 22:48 yong-01.pid-rw-rw---- 1 mysql mysql 120 6月 28 22:48 yueyong123.000001-rw-rw---- 1 mysql mysql 20 6月 28 22:48 yueyong123.indexdrwx------ 2 mysql mysql 324 6月 28 00:14 zrlog
* 其中 .index 索引页,这个文件是必须要有的
* 其中 .000001 这个是二进制日志文件,会持续生成2、3、4等等(这个文件是实现主从配置的根本,没有这个文件根本没有办法完成主从)
* 测试,准备一个数据做演示用的
* 首先做一个备份 mysqldump -uroot -p111111 zrlog > /tmp/zrlog.sql
[root@yong-01 mysql]# mysqldump -uroot -p111111 zrlog > /tmp/zrlog.sql
Warning: Using a password on the command line interface can be insecure.
* 然后创建一个新的库 mysql -uroot -p111111 -e "create database yong"
[root@yong-01 mysql]# mysql -uroot -p111111 -e "create database yong"
Warning: Using a password on the command line interface can be insecure.
* 创建好库后,还需要把数据恢复一下,那也就是说做的主从,参考的对象就是yong 这个库
* mysql -uroot -p111111 han < /tmp/zrlog.sql
[root@yong-01 mysql]# mysql -uroot -p111111 yong < /tmp/zrlog.sql
Warning: Using a password on the command line interface can be insecure.
* 再来查看/data/mysql/目录下的文件 ll /data/mysql/
[root@yong-01 mysql]# ll /data/mysql/
总用量 110720
-rw-rw---- 1 mysql mysql 56 6月 6 20:29 auto.cnf
drwx------ 2 mysql mysql 48 6月 20 22:19 db1
-rw-rw---- 1 mysql mysql 12582912 6月 28 22:54 ibdata1-rw-rw---- 1 mysql mysql 50331648 6月 28 22:55 ib_logfile0-rw-rw---- 1 mysql mysql 50331648 6月 6 20:19 ib_logfile1
drwx------ 2 mysql mysql 4096 6月 20 23:00 mysql
drwx------ 2 mysql mysql 68 6月 20 23:04 mysql2
drwx------ 2 mysql mysql 4096 6月 6 20:19 performance_schema
drwx------ 2 mysql mysql 6 6月 6 20:19 test
drwx------ 2 mysql mysql 324 6月 28 22:54 yong
-rw-rw---- 1 mysql mysql 97137 6月 28 22:48 yong-01.err-rw-rw---- 1 mysql mysql 5 6月 28 22:48 yong-01.pid-rw-rw---- 1 mysql mysql 10258 6月 28 22:54 yueyong123.000001-rw-rw---- 1 mysql mysql 20 6月 28 22:48 yueyong123.index
drwx------ 2 mysql mysql 324 6月 28 00:14 zrlog
1. 能看到yueyong123.000001二进制文件是有增加的,yueyong123.000001增长的大小是和zrlog这个库的保持一致的,yueyong123.000001文件里完整的记录了数据库的创建的库,创建的表,以及表里的内容全都有
2. 下面创建用于主从相互同步数据的用户
3. 先进入到mysql里面去
* mysql -uroot -p111111
[root@yong-01 mysql]# mysql -uroot -p111111
* 创建用户 grant replication slave on *.* to 'repl'@'192.168.180.135' identified by '123456';
指定权限,replication slave权限 针对repl这个用户 针对 从 的那个IP,指定来源(若是写所有的IP会很危险)
mysql> grant replication slave on *.* to 'repl'@'192.168.180.135' identified by '123456';
Query OK, 0 rows affected (0.00 sec)
* 锁定表,目的是不让表继续写,因为一会需要做 从 机器配置,需要进行一个同步,让两台机器同步,保证两台机器的数据一致,同步才不会出错
* flush tables with read lock;
mysql> flush tables with read lock;
Query OK, 0 rows affected (0.00 sec)
* 查看一下binlog的文件和大小,并记住binlog的filename
* show master status;
mysql> show master status;
+-------------------+----------+--------------+------------------+-------------------+
| File | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+-------------------+----------+--------------+------------------+-------------------+
| yueyong123.000001 | 10470 | | | |
+-------------------+----------+--------------+------------------+-------------------+
1 row in set (0.00 sec)
* 然后退出数据库,做一个数据同步
* 查看/data/mysql/下有哪些库,主上有哪些库,一会从上也得有哪些库,同步这些库,就意味着这些数据都得备份过去
[root@yong-01 ~]# ls /data/mysql/
auto.cnf ib_logfile0 mysql2 yong yueyong123.000001 yueyong123.000004 zrlog
db1 ib_logfile1 performance_schema yong-01.err yueyong123.000002 yueyong123.000005
ibdata1 mysql test yong-01.pid yueyong123.000003 yueyong123.index
* 备份数据库,除了mysql库,因为mysql库里面有账号密码,从上的时候不可能把所有权限复制过去,所以mysql不需要备份
* 备份其他的库
[root@yong-01 mysql]# mysqldump -uroot -p111111 test > /tmp/test.sql
Warning: Using a password on the command line interface can be insecure.
* 等会把/tmp/目录下 .sql文件都拷贝到 从上 去
[root@yong-01 mysql]# ls /tmp/*sql
/tmp/test.sql /tmp/zrlog.sql
* 主上操作完成,接下来从上操作
主从配置 - 从上操作
* 安装mysql
* 查看my.cnf,配置server-id=132,要求和主不一样
* 修改完配置文件后,启动或者重启mysqld服务
* 把主上aming库同步到从上
* 可以先创建aming库,然后把主上的/tmp/mysql.sql拷贝到从上,然后导入aming库
* mysql -uroot
* stop slave;
* change master to master_host='', master_user='repl', master_password='', master_log_file='', master_log_pos=xx,
* start slave;
* 还要到主上执行 unlock tables
主从配置 - 从上操作
* 在从上机器配置
* 首先在从上安装并启动mysql,然后查看my.cnf,配置server-id=131,要求和主不一样,在配置文件的 log_bin参数 就不需要配置的,因为只有 主上 才需要二进制日志文件
* 重启mysql服务
[root@yong-02 ~]# /etc/init.d/mysqld restart
Shutting down MySQL.. SUCCESS!
Starting MySQL.. SUCCESS!
* 在增加 server-id 后,对于mysql 是没有任何变化的
[root@yong-02 ~]# ls /data/mysql
auto.cnf ib_logfile0 mysql test yong-02.pid
ibdata1 ib_logfile1 performance_schema yong-02.err
* 把主机器上备份的 .sql 数据,拷贝到从机器上,然后做一个数据恢复
* scp 192.168.180.134:/tmp/*.sql /tmp/
* 拷贝数据失败
* 原因:
* 在拷贝的数据的时候,一直拷贝数据失败,因为在主上的机器里有开机启动脚本,所以导致拷贝数据失败
* - 解决方法:将主机器的里的开机启动脚本关闭vi .bashrc配置文件文件中注释掉脚本,再来拷贝数据到从机器上,会发现成功
[root@yong-02 ~]# scp 192.168.180.134:/tmp/*.sql /tmp/
root@192.168.180.134's password:
test.sql 100% 1258 695.6KB/s 00:00
zrlog.sql
* 进入到从数据库中
[root@yong-02 ~]# mysql -uroot -p123456
* 创建库create database zrlog ; create database test1;
mysql> create database zrlog;
Query OK, 1 row affected (0.00 sec)
mysql> create database test1;
Query OK, 1 row affected (0.00 sec)
* 然后将数据库做一个恢复
* mysql -uroot test < /tmp/test.sql
[root@yong-02 ~]# mysql -uroot -p123456 test </tmp/test.sql
Warning: Using a password on the command line interface can be insecure.
[root@yong-02 ~]# mysql -uroot -p123456 zrlog </tmp/zrlog.sql
Warning: Using a password on the command line interface can be insecure.
* 保证两边数据一致
* 然后查看/data/mysql/目录下的数据是否和主机器上的/data/mysql/目录是否一致
* 开始实现主从
* 在从机器登录到mysql
[root@yong-02 ~]# mysql -uroot -p123456
* 然后在数据库里面执行命令,停止slave
* stop slave;
mysql> stop slave;
Query OK, 0 rows affected, 1 warning (0.00 sec)
* 配置主机器相关配置
* change master to master_host='192.168.180.134', master_user='repl', master_password='123456', master_log_file='yueyong123.000001', master_log_pos=10470;
* master_host='192.168.180.134',指定主机器host
* master_user='repl',指定主机器用户
* master_password='123456',指定主机器密码
* master_log_file='yueyong1.000001',指定binlog文件名
* master_log_pos=10470,指定binlog文件大小
* 也可以指定主机器的port,因为在生产环境中,也会有人更改mysql的默认端口 master_port=3306
mysql> change master to master_host='192.168.180.134', master_user='repl', master_password='123456', master_log_file='yueyong123.000001', master_log_pos=10470;
Query OK, 0 rows affected, 2 warnings (0.01 sec)
* 开始slave start slave;
mysql> start slave;
Query OK, 0 rows affected (0.01 sec)
1. 这时候通过 show slave status\G 判断主从是否配置成功
查看slave配置
* show slave status\G
* 在G后面不需要加分号,\G本身就是一种结束符
* 看 Slave_IO_Running: Yes 是否为yes
* 看 Slave_SQL_Running: Yes 是否为yes
mysql> show slave status\G
*************************** 1. row *************************** Slave_IO_State: Waiting for master to send event Master_Host: 192.168.180.134 Master_User: repl Master_Port: 3306 Connect_Retry: 60 Master_Log_File: yueyong123.000001 Read_Master_Log_Pos: 10470 Relay_Log_File: yong-02-relay-bin.000002 Relay_Log_Pos: 284 Relay_Master_Log_File: yueyong123.000001 Slave_IO_Running: Yes Slave_SQL_Running: Yes Replicate_Do_DB: Replicate_Ignore_DB: Replicate_Do_Table: Replicate_Ignore_Table: Replicate_Wild_Do_Table:
Replicate_Wild_Ignore_Table:
Last_Errno: 0 Last_Error: Skip_Counter: 0 Exec_Master_Log_Pos: 10470 Relay_Log_Space: 459 Until_Condition: None Until_Log_File: Until_Log_Pos: 0 Master_SSL_Allowed: No Master_SSL_CA_File: Master_SSL_CA_Path: Master_SSL_Cert: Master_SSL_Cipher: Master_SSL_Key: Seconds_Behind_Master: 0
Master_SSL_Verify_Server_Cert: No
Last_IO_Errno: 0 Last_IO_Error: Last_SQL_Errno: 0 Last_SQL_Error:
Replicate_Ignore_Server_Ids:
Master_Server_Id: 134 Master_UUID: 3e50127a-6985-11e8-8d9b-000c29292b60 Master_Info_File: /data/mysql/master.info SQL_Delay: 0 SQL_Remaining_Delay: NULL Slave_SQL_Running_State: Slave has read all relay log; waiting for the slave I/O thread to update it Master_Retry_Count: 86400 Master_Bind: Last_IO_Error_Timestamp: Last_SQL_Error_Timestamp: Master_SSL_Crl: Master_SSL_Crlpath: Retrieved_Gtid_Set: Executed_Gtid_Set: Auto_Position: 0
1 row in set (0.00 sec)
* 解锁“主”上的表(在主上机器操作)unlock tables;
[root@yong-01 mysql]# mysql -uroot -p111111
mysql> unlock table;
Query OK, 0 rows affected (0.00 sec)
* 到这里主从搭建就算完成了
查看主从同步是否正常
* 从上执行mysql -uroot
* show slave stauts\G
* 看是否有
* Slave_IO_Running: Yes
* Slave_SQL_Running: Yes
* 还需关注
* Seconds_Behind_Master: 0 //为主从延迟的时间
* Last_IO_Errno: 0
* Last_IO_Error:
* Last_SQL_Errno: 0
* Last_SQL_Error:
主服务器上
binlog-do-db= //仅同步指定的库(多个库,可以用“ , ”逗号分隔)——>英文的逗号 ,
binlog-ignore-db= //忽略指定库
从服务器上
replicate_do_db= //仅同步指定的库
replicate_ignore_db= //忽略指定库
replicate_do_table= //仅同步指定的表
replicate_ignore_table= //忽略指定表,
- 例如:有一个临时表,写的数据非常快,数据也大,每天都需要删除这时就可以更新删除这个,那么就不需要每天去做同步
replicate_wild_do_table= //如aming.%, 支持通配符% 指定同步靠谱的匹配 同步表
replicate_wild_ignore_table= //如aming.%, 支持通配符% 指定同步靠谱的匹配 忽略表
* 进行从服务器的配置时尽量使用参数“replicate_wild_”,使匹配更精确,提升使用性能。
测试主从
* 主上 mysql -uroot aming
* select count(*) from db;
* truncate table db;
* 到从上 mysql -uroot aming
* select count(*) from db;
* 主上继续drop table db;
* 从上查看db表
在主上机器,进入到mysql
[root@yong-01 mysql]# mysql -uroot -p111111
* 进入到zrlog库里面 use zrlog;
* 查看表,有几个表
* show tables;
mysql> show tables;
+-----------------+
| Tables_in_zrlog |
+-----------------+
| comment || link || log || lognav || plugin || tag || type || user || website |
+-----------------+
9 rows in set (0.00 sec)
* 查看表有多少行,会看到website里面有9行数据
* select count(*) from website;
mysql> select count(*) from website;
+----------+
| count(*) |
+----------+
| 9 |
+----------+
1 row in set (0.00 sec)
1. 这时候再来查看 从上 的zrlog表上的数据,会看到是一样的
mysql> select count(*) from website;
+----------+
| count(*) |
+----------+
| 9 |
+----------+
1 row in set (0.00 sec)
* 将主机器上的 表做一个删除操作
* truncate table website;
* truncate 表示 清空
mysql> truncate table website;
Query OK, 0 rows affected (0.00 sec)
* 再来查看 主机器 的表和 从机器 上表都会被删除了
mysql> select count(*) from website;
+----------+
| count(*) |
+----------+
| 0 |
+----------+
1 row in set (0.00 sec)
* 若是误操作了,比如在从机器误删除了,再去主上删除相同的数据,就会有可能导致主从失败
* 这时在从机器上 start slave;
* 然后在start slave;
* 再来查看show slave status\G
* 若是还是失败,则只能 重新做主从了
* 重新主从
* 在主机器的数据库上 show mater status; 查看文件大小
* 然后在从机器上先stop slave;
* 然后直接change master to master_host='192.168.180.134', master_user='repl', master_password='123456', master_log_file='yueyong123.000001', master_log_pos=10470;
* 因为基本还没做什么操作的,数据还是一致的,直接改下数据大小就行
* 然后在从机器上 start slave;
* 再来查看 show slave status\G 看是否为两个Yes
* 若实在不行只能从头做主从的