2018-12-28 直播课笔记

MySQL主从介绍

* MySQL主从又叫做Replication、AB复制。简单讲就是A和B两台机器做主从后,在A上写数据,另外一台B也会跟着写数据,两者数据实时同步的

* MySQL主从是基于binlog的,主上须开启binlog才能进行主从。

    * binlog,其实就是一个文件,文件里记录了一些日志,文件是 二进制文件,无法cat

* 主从过程大致有3个步骤

    * 主将更改操作记录到binlog里

    * 从将主的binlog事件(sql语句)同步到从本机上并记录在relaylog里

        * relaylog,中文叫做 中继日志

    * 从根据relaylog里面的sql语句按顺序执行

* mysql主从共有三个线程

    * 主上有一个log dump线程,用来和从的I/O线程传递binlog

    * 从上有两个线程,其中I/O线程用来同步主的binlog并生成relaylog,另外一个SQL线程用来把relaylog里面的sql语句落地

MySQL主从原理图

a95c026f653e2b7d739594d11c58a6cefe9.jpg

mysql主从使用场景:

1. 数据备份,主机器宕机,从机器还能随时对web提供服务

2. 作为一个从库,读的库,减轻主库的压力,数据备份且可以分担主机器被调用数据时的压力,mysql主从,是有方向性的,写数据,必须从主机器开始;如果不依照原理会导致数据紊乱

17.2 准备工作

mysql安装总结

* mysql主从准备工作:

    * 准备两台机器,每台机器安装msyql服务,并启动mysql服务

* mysql详细安装

1. 首先下载二进制免编译的包,下载到/usr/local/src/目录下

2. 解压压缩包

3. 解压完之后,把解压出来的目录放到 /usr/local/mysql/ 目录下

* 注意点:

    * 首先检查 /usr/local/mysql/ 目录是否存在

    * 若是这个目录存在,首先把这个目录改个名字,或者把目录下的内容删除

    * 然后把解压出来的目录放到 /usr/local/mysql/ 目录下面

* 然后切换到 /usr/local/mysql/ 目录下,进行初始化 命令

* 初始化命令 ./scripts/mysql_install_db --user=mysql --datadir=/data/mysql

    * 注意点:

        * 其中的--user=mysql 需要提前创建

1. 初始化成功的标志就是两个OK,或者用 echo $? 检查是否初始化成功

2. 编辑 /etc/my.cnf 文件——>默认是自带 my.cnf 文件的

在 /etc/my.cnf 文件中

定义 datadir=/data/mysql     

定义 socket=/tmp/mysql.sock

* 拷贝启动脚本

* 命令 cp /usr/local/mysql/support-files/mysql.server /etc/init.d/mysqld

* 编辑启动脚本

vim /etc/init.d/mysqld //对以下两行进行指定路径

 

指定basedir的路径 /usr/local/mysql  

指定datadir的路径 /data/mysql

* 之后就可以启动mysql了

* 命令 /etc/init.d/mysql start

* 如果启动失败,可以去查看错误日志

* 建议 :查看 /data/mysql 目录下的文件,默认属主、属组,如果不是mysql的,启动时会因无法写入数据而不能启动mysql

    * 改变属主和属组,命令 chomd mysql:mysql /data/mysql

* 然后就可以尝试启动,命令 /etc/init.d/mysql start

* 若想开机启动,只需要输入命令

* 命令 chkconfig mysqld on

主从配置 - 主上操作

* 安装mysql

* 修改my.cnf,增加server-id=130和log_bin=aminglinux1

* 修改完配置文件后,启动或者重启mysqld服务

* 把mysql库备份并恢复成aming库,作为测试数据

* mysqldump -uroot mysql > /tmp/mysql.sql

* mysql -uroot -e “create database aming”

* mysql -uroot aming < /tmp/mysql.sql

* 创建用作同步数据的用户

* grant replication slave on . to 'repl'@slave_ip identified by 'password';

* flush tables with read lock;

* show master status;

主从配置 - 主上操作

1. 在两台机器安装并启动mysql服务后,首先在主上进行操作

2. 修改/etc/my.cnf配置文件

* 在配置文件下[mysqld]下添加

    * server-id=134 这个id可以自定义,这里根据ip来定义

    * log_bin=yueyong123 打开binlog,名字自定义为log_bin=yueyong123 最终如下

 

* 更改完配置文件后,需要重启mysql

* /etc/init.d/mysqld restart

[root@yong-01 mysql]# /etc/init.d/mysqld restart

Shutting down MySQL.. SUCCESS!

Starting MySQL.. SUCCESS!

* 这时候来/data/mysql/目录下,会生成一些文件

* ls -lt /data/mysql/

[root@yong-01 mysql]# ll

总用量 110712

-rw-rw---- 1 mysql mysql       56 6月   6 20:29 auto.cnfdrwx------ 2 mysql mysql       48 6月  20 22:19 db1-rw-rw---- 1 mysql mysql 12582912 6月  28 22:48 ibdata1-rw-rw---- 1 mysql mysql 50331648 6月  28 22:48 ib_logfile0-rw-rw---- 1 mysql mysql 50331648 6月   6 20:19 ib_logfile1drwx------ 2 mysql mysql     4096 6月  20 23:00 mysqldrwx------ 2 mysql mysql       68 6月  20 23:04 mysql2drwx------ 2 mysql mysql     4096 6月   6 20:19 performance_schemadrwx------ 2 mysql mysql        6 6月   6 20:19 test-rw-rw---- 1 mysql mysql    97137 6月  28 22:48 yong-01.err-rw-rw---- 1 mysql mysql        5 6月  28 22:48 yong-01.pid-rw-rw---- 1 mysql mysql      120 6月  28 22:48 yueyong123.000001-rw-rw---- 1 mysql mysql       20 6月  28 22:48 yueyong123.indexdrwx------ 2 mysql mysql      324 6月  28 00:14 zrlog

* 其中 .index 索引页,这个文件是必须要有的

* 其中 .000001 这个是二进制日志文件,会持续生成2、3、4等等(这个文件是实现主从配置的根本,没有这个文件根本没有办法完成主从)

* 测试,准备一个数据做演示用的

* 首先做一个备份 mysqldump -uroot -p111111 zrlog > /tmp/zrlog.sql

[root@yong-01 mysql]# mysqldump -uroot -p111111 zrlog > /tmp/zrlog.sql

Warning: Using a password on the command line interface can be insecure.

* 然后创建一个新的库 mysql -uroot -p111111 -e "create database yong"

[root@yong-01 mysql]# mysql -uroot -p111111 -e "create database yong"

Warning: Using a password on the command line interface can be insecure.

* 创建好库后,还需要把数据恢复一下,那也就是说做的主从,参考的对象就是yong 这个库

* mysql -uroot -p111111 han < /tmp/zrlog.sql

[root@yong-01 mysql]# mysql -uroot -p111111 yong < /tmp/zrlog.sql

Warning: Using a password on the command line interface can be insecure.

* 再来查看/data/mysql/目录下的文件  ll /data/mysql/

[root@yong-01 mysql]# ll /data/mysql/

总用量 110720

-rw-rw---- 1 mysql mysql       56 6月   6 20:29 auto.cnf

drwx------ 2 mysql mysql       48 6月  20 22:19 db1

-rw-rw---- 1 mysql mysql 12582912 6月  28 22:54 ibdata1-rw-rw---- 1 mysql mysql 50331648 6月  28 22:55 ib_logfile0-rw-rw---- 1 mysql mysql 50331648 6月   6 20:19 ib_logfile1

drwx------ 2 mysql mysql     4096 6月  20 23:00 mysql

drwx------ 2 mysql mysql       68 6月  20 23:04 mysql2

drwx------ 2 mysql mysql     4096 6月   6 20:19 performance_schema

drwx------ 2 mysql mysql        6 6月   6 20:19 test

drwx------ 2 mysql mysql      324 6月  28 22:54 yong

-rw-rw---- 1 mysql mysql    97137 6月  28 22:48 yong-01.err-rw-rw---- 1 mysql mysql        5 6月  28 22:48 yong-01.pid-rw-rw---- 1 mysql mysql    10258 6月  28 22:54 yueyong123.000001-rw-rw---- 1 mysql mysql       20 6月  28 22:48 yueyong123.index

drwx------ 2 mysql mysql      324 6月  28 00:14 zrlog

1. 能看到yueyong123.000001二进制文件是有增加的,yueyong123.000001增长的大小是和zrlog这个库的保持一致的,yueyong123.000001文件里完整的记录了数据库的创建的库,创建的表,以及表里的内容全都有

2. 下面创建用于主从相互同步数据的用户

3. 先进入到mysql里面去

* mysql -uroot -p111111

[root@yong-01 mysql]# mysql -uroot -p111111

* 创建用户  grant replication slave on *.* to 'repl'@'192.168.180.135' identified by '123456';

指定权限,replication slave权限  针对repl这个用户 针对 从 的那个IP,指定来源(若是写所有的IP会很危险)

mysql> grant replication slave on *.* to 'repl'@'192.168.180.135' identified by '123456';

Query OK, 0 rows affected (0.00 sec)

* 锁定表,目的是不让表继续写,因为一会需要做 从 机器配置,需要进行一个同步,让两台机器同步,保证两台机器的数据一致,同步才不会出错

* flush tables with read lock;

mysql> flush tables with read lock;

Query OK, 0 rows affected (0.00 sec)

* 查看一下binlog的文件和大小,并记住binlog的filename

* show master status;

mysql> show master status;

+-------------------+----------+--------------+------------------+-------------------+

| File              | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |

+-------------------+----------+--------------+------------------+-------------------+

| yueyong123.000001 |    10470 |              |                  |                   |

+-------------------+----------+--------------+------------------+-------------------+

1 row in set (0.00 sec)

* 然后退出数据库,做一个数据同步

* 查看/data/mysql/下有哪些库,主上有哪些库,一会从上也得有哪些库,同步这些库,就意味着这些数据都得备份过去

[root@yong-01 ~]# ls /data/mysql/

auto.cnf  ib_logfile0  mysql2              yong         yueyong123.000001  yueyong123.000004  zrlog

db1       ib_logfile1  performance_schema  yong-01.err  yueyong123.000002  yueyong123.000005

ibdata1   mysql        test                yong-01.pid  yueyong123.000003  yueyong123.index

* 备份数据库,除了mysql库,因为mysql库里面有账号密码,从上的时候不可能把所有权限复制过去,所以mysql不需要备份

* 备份其他的库

[root@yong-01 mysql]# mysqldump -uroot -p111111 test > /tmp/test.sql

Warning: Using a password on the command line interface can be insecure.

* 等会把/tmp/目录下 .sql文件都拷贝到 从上 去

[root@yong-01 mysql]# ls /tmp/*sql

/tmp/test.sql  /tmp/zrlog.sql

* 主上操作完成,接下来从上操作

主从配置 - 从上操作

* 安装mysql

* 查看my.cnf,配置server-id=132,要求和主不一样

* 修改完配置文件后,启动或者重启mysqld服务

* 把主上aming库同步到从上

* 可以先创建aming库,然后把主上的/tmp/mysql.sql拷贝到从上,然后导入aming库

* mysql -uroot

* stop slave;

* change master to master_host='', master_user='repl', master_password='', master_log_file='', master_log_pos=xx,

* start slave;

* 还要到主上执行 unlock tables

主从配置 - 从上操作

* 在从上机器配置

* 首先在从上安装并启动mysql,然后查看my.cnf,配置server-id=131,要求和主不一样,在配置文件的 log_bin参数 就不需要配置的,因为只有 主上 才需要二进制日志文件

* 重启mysql服务

[root@yong-02 ~]# /etc/init.d/mysqld restart

Shutting down MySQL.. SUCCESS!

Starting MySQL.. SUCCESS!

* 在增加 server-id 后,对于mysql 是没有任何变化的

[root@yong-02 ~]# ls /data/mysql

auto.cnf  ib_logfile0  mysql               test         yong-02.pid

ibdata1   ib_logfile1  performance_schema  yong-02.err

* 把主机器上备份的 .sql 数据,拷贝到从机器上,然后做一个数据恢复

* scp 192.168.180.134:/tmp/*.sql /tmp/

* 拷贝数据失败

    * 原因:

        * 在拷贝的数据的时候,一直拷贝数据失败,因为在主上的机器里有开机启动脚本,所以导致拷贝数据失败

        * - 解决方法:将主机器的里的开机启动脚本关闭vi .bashrc配置文件文件中注释掉脚本,再来拷贝数据到从机器上,会发现成功

[root@yong-02 ~]# scp 192.168.180.134:/tmp/*.sql /tmp/

root@192.168.180.134's password:

test.sql                                                           100% 1258   695.6KB/s   00:00    

zrlog.sql

* 进入到从数据库中

[root@yong-02 ~]# mysql -uroot -p123456

* 创建库create database zrlog ;   create database test1;

mysql> create database zrlog;

Query OK, 1 row affected (0.00 sec)

 

mysql> create database test1;

Query OK, 1 row affected (0.00 sec)

* 然后将数据库做一个恢复

* mysql -uroot test < /tmp/test.sql

[root@yong-02 ~]# mysql -uroot -p123456 test </tmp/test.sql

Warning: Using a password on the command line interface can be insecure.

[root@yong-02 ~]# mysql -uroot -p123456 zrlog </tmp/zrlog.sql

Warning: Using a password on the command line interface can be insecure.

* 保证两边数据一致

* 然后查看/data/mysql/目录下的数据是否和主机器上的/data/mysql/目录是否一致

* 开始实现主从

* 在从机器登录到mysql

[root@yong-02 ~]# mysql -uroot -p123456

* 然后在数据库里面执行命令,停止slave

* stop slave;

mysql> stop slave;

Query OK, 0 rows affected, 1 warning (0.00 sec)

* 配置主机器相关配置

* change master to master_host='192.168.180.134', master_user='repl', master_password='123456', master_log_file='yueyong123.000001', master_log_pos=10470;

    * master_host='192.168.180.134',指定主机器host

    * master_user='repl',指定主机器用户

    * master_password='123456',指定主机器密码

    * master_log_file='yueyong1.000001',指定binlog文件名

    * master_log_pos=10470,指定binlog文件大小

* 也可以指定主机器的port,因为在生产环境中,也会有人更改mysql的默认端口 master_port=3306

mysql> change master to master_host='192.168.180.134', master_user='repl', master_password='123456', master_log_file='yueyong123.000001', master_log_pos=10470;

Query OK, 0 rows affected, 2 warnings (0.01 sec)

* 开始slave  start slave;

mysql> start slave;

Query OK, 0 rows affected (0.01 sec)

1. 这时候通过 show slave status\G 判断主从是否配置成功

查看slave配置

* show slave status\G

    * 在G后面不需要加分号,\G本身就是一种结束符

    * 看 Slave_IO_Running: Yes 是否为yes

    * 看 Slave_SQL_Running: Yes 是否为yes

mysql> show slave status\G

*************************** 1. row ***************************               Slave_IO_State: Waiting for master to send event                  Master_Host: 192.168.180.134                  Master_User: repl                  Master_Port: 3306                Connect_Retry: 60              Master_Log_File: yueyong123.000001          Read_Master_Log_Pos: 10470               Relay_Log_File: yong-02-relay-bin.000002                Relay_Log_Pos: 284        Relay_Master_Log_File: yueyong123.000001             Slave_IO_Running: Yes            Slave_SQL_Running: Yes              Replicate_Do_DB:           Replicate_Ignore_DB:            Replicate_Do_Table:        Replicate_Ignore_Table:       Replicate_Wild_Do_Table:

  Replicate_Wild_Ignore_Table:

                   Last_Errno: 0                   Last_Error:                  Skip_Counter: 0          Exec_Master_Log_Pos: 10470              Relay_Log_Space: 459              Until_Condition: None               Until_Log_File:                 Until_Log_Pos: 0           Master_SSL_Allowed: No           Master_SSL_CA_File:            Master_SSL_CA_Path:               Master_SSL_Cert:             Master_SSL_Cipher:                Master_SSL_Key:         Seconds_Behind_Master: 0

Master_SSL_Verify_Server_Cert: No

                Last_IO_Errno: 0                Last_IO_Error:                Last_SQL_Errno: 0               Last_SQL_Error:

  Replicate_Ignore_Server_Ids:

             Master_Server_Id: 134                  Master_UUID: 3e50127a-6985-11e8-8d9b-000c29292b60             Master_Info_File: /data/mysql/master.info                    SQL_Delay: 0          SQL_Remaining_Delay: NULL      Slave_SQL_Running_State: Slave has read all relay log; waiting for the slave I/O thread to update it           Master_Retry_Count: 86400                  Master_Bind:       Last_IO_Error_Timestamp:      Last_SQL_Error_Timestamp:                Master_SSL_Crl:            Master_SSL_Crlpath:            Retrieved_Gtid_Set:             Executed_Gtid_Set:                 Auto_Position: 0

1 row in set (0.00 sec)

* 解锁“主”上的表(在主上机器操作)unlock tables;

[root@yong-01 mysql]# mysql -uroot -p111111

 

mysql> unlock table;

Query OK, 0 rows affected (0.00 sec)

* 到这里主从搭建就算完成了

查看主从同步是否正常

* 从上执行mysql -uroot

* show slave stauts\G

* 看是否有

* Slave_IO_Running: Yes

* Slave_SQL_Running: Yes

* 还需关注

* Seconds_Behind_Master: 0 //为主从延迟的时间

* Last_IO_Errno: 0

* Last_IO_Error:

* Last_SQL_Errno: 0

* Last_SQL_Error:

主服务器上

binlog-do-db=            //仅同步指定的库(多个库,可以用“ , ”逗号分隔)——>英文的逗号 ,

binlog-ignore-db=     //忽略指定库

从服务器上

replicate_do_db=          //仅同步指定的库

replicate_ignore_db=     //忽略指定库

replicate_do_table=         //仅同步指定的表

replicate_ignore_table=    //忽略指定表,

    - 例如:有一个临时表,写的数据非常快,数据也大,每天都需要删除这时就可以更新删除这个,那么就不需要每天去做同步

replicate_wild_do_table=   //如aming.%, 支持通配符%  指定同步靠谱的匹配  同步表   

replicate_wild_ignore_table=   //如aming.%, 支持通配符%  指定同步靠谱的匹配  忽略表

* 进行从服务器的配置时尽量使用参数“replicate_wild_”,使匹配更精确,提升使用性能。

测试主从

* 主上 mysql -uroot aming

* select count(*) from db;

* truncate table db;

* 到从上 mysql -uroot aming

* select count(*) from db;

* 主上继续drop table db;

* 从上查看db表

在主上机器,进入到mysql

[root@yong-01 mysql]# mysql -uroot -p111111

* 进入到zrlog库里面 use zrlog;

* 查看表,有几个表

* show tables;

mysql> show tables;

+-----------------+

| Tables_in_zrlog |

+-----------------+

| comment         || link            || log             || lognav          || plugin          || tag             || type            || user            || website         |

+-----------------+

9 rows in set (0.00 sec)

* 查看表有多少行,会看到website里面有9行数据

* select count(*) from website;

mysql> select count(*) from website;

+----------+

| count(*) |

+----------+

|        9 |

+----------+

1 row in set (0.00 sec)

1. 这时候再来查看 从上 的zrlog表上的数据,会看到是一样的

mysql> select count(*) from website;

+----------+

| count(*) |

+----------+

|        9 |

+----------+

1 row in set (0.00 sec)

* 将主机器上的 表做一个删除操作

* truncate table website;

    * truncate 表示 清空

mysql> truncate table website;

Query OK, 0 rows affected (0.00 sec)

* 再来查看 主机器 的表和 从机器 上表都会被删除了

mysql> select count(*) from website;

+----------+

| count(*) |

+----------+

|        0 |

+----------+

1 row in set (0.00 sec)

* 若是误操作了,比如在从机器误删除了,再去主上删除相同的数据,就会有可能导致主从失败

    * 这时在从机器上 start slave;

    * 然后在start slave;

    * 再来查看show slave status\G

    * 若是还是失败,则只能 重新做主从了

        * 重新主从

        * 在主机器的数据库上 show mater status; 查看文件大小

        * 然后在从机器上先stop slave;

            * 然后直接change master to master_host='192.168.180.134', master_user='repl', master_password='123456', master_log_file='yueyong123.000001', master_log_pos=10470;

                * 因为基本还没做什么操作的,数据还是一致的,直接改下数据大小就行

        * 然后在从机器上 start slave;

        * 再来查看 show slave status\G 看是否为两个Yes

        * 若实在不行只能从头做主从的

转载于:https://my.oschina.net/u/3991860/blog/2996829

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值