Mysql主从复制和读写分离
读写分离，基本的原理是让主数据库处理事务性增、改、删操作（INSERT、UPDATE、DELETE），而从数据库处理SELECT查询操作。数据库复制被用来把事务性操作导致的变更同步到集群中的从数据库。
数据库的“写”操作是比较耗时的。但是数据库的“读”操作并不耗时。但是当“读”操作和“写”操作同时运作时，“写”操作便会影响到“读”操作，所以读写分离，解决的是，数据库的写入，影响了查询的效率。
数据库也不是一定要读写分离，如果程序使用数据库较多时，而更新少，查询多的情况下会考虑使用。利用数据库主从同步，再通过读写分离可以分担数据库压力，提高性能。
在实际的生产环境中，对数据库的读和写都在同一个数据库服务器中，是不能满足实际需求的。无论是在安全性、高可用性还是高并发等各个方面都是完全不能满足实际需求的。因此，通过主从复制的方式来同步数据，再通过读写分离来提升数据库的并发负载能力。有点类似于rsync，但是不同的是rsync是对磁盘文件做备份，而mysql主从复制是对数据库中的数据、语句做备份。
mysql支持的复制类型
STATEMENT：基于语句的复制。在服务器上执行sql语句，在从服务器上执行同样的语句，mysql默认采用基于语句的复制，执行效率高。
ROW：基于行的复制。把改变的内容复制过去，而不是把命令在从服务器上执行一遍。
MIXED：混合类型的复制。默认采用基于语句的复制，一旦发现基于语句无法精确复制时，就会采用基于行的复制。
主从复制的工作过程
Master节点将数据的改变记录成二进制日志（bin log），当Master上的数据发生改变时，则将其改变写入二进制日志中。
Slave节点会在一定时间间隔内对Master的二进制日志进行探测其是否发生改变，如果发生改变，则开始一个I/O线程请求 Master的二进制事件。
同时Master节点为每个I/O线程启动一个dump线程，用于向其发送二进制事件，并保存至Slave节点本地的中继日志（Relay log）中，Slave节点将启动SQL线程从中继日志中读取二进制日志，在本地重放，即解析成 sql 语句逐一执行，使得其数据和 Master节点的保持一致，最后I/O线程和SQL线程将进入睡眠状态，等待下一次被唤醒。
**注：**中继日志通常会位于 OS 缓存中，所以中继日志的开销很小。
复制过程有一个很重要的限制，即复制在 Slave上是串行化的，也就是说 Master上的并行更新操作不能在 Slave上并行操作。
MySQL 读写分离原理
读写分离就是只在主服务器上写，只在从服务器上读。基本的原理是让主数据库处理事务性操作，而从数据库处理 select 查询。数据库复制被用来把主数据库上事务性操作导致的变更同步到集群中的从数据库。
目前较为常见的 Mysql 读写分离分为以下两种：
1）基于程序代码内部实现
在代码中根据 select、insert 进行路由分类，这类方法也是目前生产环境应用最广泛的。
优点是性能较好，因为在程序代码中实现，不需要增加额外的设备为硬件开支；缺点是需要开发人员来实现，运维人员无从下手。
但是并不是所有的应用都适合在程序代码中实现读写分离，像一些大型复杂的Java应用，如果在程序代码中实现读写分离对代码改动就较大。
2）基于中间代理层实现
代理一般位于客户端和服务器之间，代理服务器接到客户端请求后通过判断后转发到后端数据库，有以下代表性程序。
（1）MySQL-Proxy。MySQL-Proxy 为 MySQL 开源项目，通过其自带的 lua 脚本进行SQL 判断。
（2）Atlas。是由奇虎360的Web平台部基础架构团队开发维护的一个基于MySQL协议的数据中间层项目。它是在mysql-proxy 0.8.2版本的基础上，对其进行了优化，增加了一些新的功能特性。360内部使用Atlas运行的mysql业务，每天承载的读写请求数达几十亿条。支持事物以及存储过程。
（3）Amoeba。由陈思儒开发，作者曾就职于阿里巴巴。该程序由Java语言进行开发，阿里巴巴将其用于生产环境。但是它不支持事务和存储过程。
（4）Mycat。是一款流行的基于Java语言编写的数据库中间件，是一个实现了MySql协议的服务器，其核心功能是分库分表。配合数据库的主从模式还可以实现读写分离。
由于使用MySQL Proxy 需要写大量的Lua脚本，这些Lua并不是现成的，而是需要自己去写。这对于并不熟悉MySQL Proxy 内置变量和MySQL Protocol 的人来说是非常困难的。
Amoeba是一个非常容易使用、可移植性非常强的软件。因此它在生产环境中被广泛应用于数据库的代理层。
搭建Mysql主从复制和读写分离
主从复制
Master 服务器：192.168.237.128 mysql5.7
Slave1 服务器：192.168.237.129 mysql5.7
Slave2 服务器：192.168.237.148 mysql5.7
Amoeba 服务器：192.168.237.138 jdk1.6、Amoeba
客户端 服务器：192.168.237.141 mysql
所有服务器：
systemctl stop firewalld #关闭防火墙
systemctl disable firewalld #永久关闭防火墙
setenforce 0 #关闭Selinux
主服务器设置:
[root@192 opt]# yum install ntp ntpdate -y
已加载插件：fastestmirror, langpacks
Loading mirror speeds from cached hostfile
* base: mirrors.cn99.com
* extras: mirrors.cn99.com
* updates: mirrors.cn99.com
正在解决依赖关系
--> 正在检查事务
---> 软件包 ntp.x86_64.0.4.2.6p5-29.el7.centos.2 将被 安装
--> 正在处理依赖关系 libopts.so.25()(64bit)，它被软件包 ntp-4.2.6p5-29.el7.centos.2.x86_64 需要
---> 软件包 ntpdate.x86_64.0.4.2.6p5-25.el7.centos.2 将被 升级
---> 软件包 ntpdate.x86_64.0.4.2.6p5-29.el7.centos.2 将被 更新
--> 正在检查事务
---> 软件包 autogen-libopts.x86_64.0.5.18-5.el7 将被 安装
--> 解决依赖关系完成
依赖关系解决
==================================================================================================================================================================================================================
Package 架构 版本 源 大小
==================================================================================================================================================================================================================
正在安装:
ntp x86_64 4.2.6p5-29.el7.centos.2 base 549 k
正在更新:
ntpdate x86_64 4.2.6p5-29.el7.centos.2 base 87 k
为依赖而安装:
autogen-libopts x86_64 5.18-5.el7 base 66 k
事务概要
==================================================================================================================================================================================================================
安装 1 软件包 (+1 依赖软件包)
升级 1 软件包
总下载量：701 k
Downloading packages:
No Presto metadata available for base
(1/3): autogen-libopts-5.18-5.el7.x86_64.rpm | 66 kB 00:00:00
(2/3): ntp-4.2.6p5-29.el7.centos.2.x86_64.rpm | 549 kB 00:00:00
(3/3): ntpdate-4.2.6p5-29.el7.centos.2.x86_64.rpm | 87 kB 00:00:00
------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
总计 1.7 MB/s | 701 kB 00:00:00
Running transaction check
Running transaction test
Transaction test succeeded
Running transaction
正在安装 : autogen-libopts-5.18-5.el7.x86_64 1/4
正在更新 : ntpdate-4.2.6p5-29.el7.centos.2.x86_64 2/4
正在安装 : ntp-4.2.6p5-29.el7.centos.2.x86_64 3/4
清理 : ntpdate-4.2.6p5-25.el7.centos.2.x86_64 4/4
验证中 : ntpdate-4.2.6p5-29.el7.centos.2.x86_64 1/4
验证中 : ntp-4.2.6p5-29.el7.centos.2.x86_64 2/4
验证中 : autogen-libopts-5.18-5.el7.x86_64 3/4
验证中 : ntpdate-4.2.6p5-25.el7.centos.2.x86_64 4/4
已安装:
ntp.x86_64 0:4.2.6p5-29.el7.centos.2
作为依赖被安装:
autogen-libopts.x86_64 0:5.18-5.el7
更新完毕:
ntpdate.x86_64 0:4.2.6p5-29.el7.centos.2
完毕！
vim /etc/ntp.conf
末行添加 #网段以自己的为主
server 192.168.237. 0 #设置本地是时钟源，注意修改网段
fudge 192.168.237.0 stratum 8 #设置时间层级为8（限制在15内）
:wq
[root@localhost ~]# service ntpd start #启动服务
Redirecting to /bin/systemctl start ntpd.service
systemctl status ntpd #验证服务是否开启（可不做）
[root@localhost ~]# systemctl status ntpd
● ntpd.service - Network Time Service
Loaded: loaded (/usr/lib/systemd/system/ntpd.service; disabled; vendor preset: disabled)
Active: active (running) since 五 2022-06-03 22:25:58 CST; 13s ago
Process: 2318 ExecStart=/usr/sbin/ntpd -u ntp:ntp $OPTIONS (code=exited, status=0/SUCCESS)
Main PID: 2319 (ntpd)
CGroup: /system.slice/ntpd.service
├─2319 /usr/sbin/ntpd -u ntp:ntp -g
└─2320 /usr/sbin/ntpd -u ntp:ntp -g
6月 03 22:25:58 localhost.localdomain ntpd[2319]: inappropriate address 192.168.237.0 for the fudge command, line ignored
6月 03 22:25:58 localhost.localdomain ntpd[2319]: 0.0.0.0 c016 06 restart
6月 03 22:25:58 localhost.localdomain ntpd[2319]: 0.0.0.0 c012 02 freq_set kernel 0.000 PPM
6月 03 22:25:58 localhost.localdomain ntpd[2319]: 0.0.0.0 c011 01 freq_not_set
6月 03 22:25:58 localhost.localdomain ntpd[2320]: signal_no_reset: signal 17 had flags 4000000
6月 03 22:25:58 localhost.localdomain systemd[1]: Started Network Time Service.
6月 03 22:26:00 localhost.localdomain ntpd_intres[2320]: host name not found: 0.centos.pool.ntp.org
6月 03 22:26:00 localhost.localdomain ntpd_intres[2320]: host name not found: 1.centos.pool.ntp.org
6月 03 22:26:00 localhost.localdomain ntpd_intres[2320]: host name not found: 2.centos.pool.ntp.org
6月 03 22:26:00 localhost.localdomain ntpd_intres[2320]: host name not found: 3.centos.pool.ntp.org
从服务器设置： #注意从服务器有两个，都要设置，这里演示只演示一个，操作相同
yum install ntp ntpdate -y
service ntpd start #开启服务
[root@localhost ~]# service ntpd start
Redirecting to /bin/systemctl start ntpd.service
[root@localhost ~]# /usr/sbin/ntpdate 192.168.237.128 #时间同步
3 Jun 22:28:56 ntpdate[2394]: the NTP socket is in use, exiting
[root@localhost ~]# crontab -e #设置定时任务，每30分钟执行一次
*/30 * * * * /usr/sbin/ntpdate 192.168.237.128
:wq
主服务器的mysql配置:
[root@localhost ~]# vim /etc/my.cnf
server-id = 11
log-bin=mysql-bin #添加，主服务器开启二进制日志
binlog_format = MIXED
log-slave-updates=true #添加，允许slave从master复制数据时可以写入到自己的二进制日志
expire_logs_days = 7 #设置二进制日志文件过期时间，默认值为0，表示logs不过期
max_binlog_size = 500M #设置二进制日志限制大小，如果超出给定值，日志就会发生滚动，默认值是1GB
:wq
[root@localhost ~]# systemctl restart mysqld
[root@localhost ~]# mysql -u root -pabc123
mysql: [Warning] Using a password on the command line interface can be insecure.
Welcome to the MySQL monitor. Commands end with ; or \g.
Your MySQL connection id is 3
Server version: 5.7.20-log Source distribution
Copyright (c) 2000, 2017, Oracle and/or its affiliates. All rights reserved.
Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.
Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.
mysql> GRANT REPLICATION SLAVE ON *.* TO 'myslave'@'192.168.237.%' IDENTIFIED BY '123456'; #给从服务器授权
Query OK, 0 rows affected, 1 warning (0.00 sec)
mysql> FLUSH PRIVILEGES; #刷新
Query OK, 0 rows affected (0.01 sec)
mysql> show master status; #查看主mysql服务器状态
+------------------+----------+--------------+------------------+-------------------+
| File | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------+----------+--------------+------------------+-------------------+
| mysql-bin.000001 | 604 | | | |
+------------------+----------+--------------+------------------+-------------------+
1 row in set (0.00 sec)
注：File列显示日志名，Position 列显示偏移量
从服务器配置：
[root@localhost ~]# vim /etc/my.cnf
server-id = 22 #修改，注意id与Master的不同，两个Slave的id也要不同
relay-log=relay-log-bin #添加，开启中继日志，从主服务器上同步日志文件记录到本地
relay-log-index=slave-relay-bin.index #添加，定义中继日志文件的位置和名称，一般和relay-log在同一目录
relay_log_recovery = 1 #选配项
#当 slave 从库宕机后，假如 relay-log 损坏了，导致一部分中继日志没有处理，则自动放弃所有未执行的 relay-log，并且重新从 master 上获取日志，这样就保证了 relay-log 的完整性。默认情况下该功能是关闭的，将 relay_log_recovery 的值设置为 1 时， 可在 slave 从库上开启该功能，建议开启。
:wq
[root@localhost ~]# systemctl restart mysqld #重启服务
[root@192 opt]# mysql -u root -pabc123
mysql: [Warning] Using a password on the command line interface can be insecure.
Welcome to the MySQL monitor. Commands end with ; or \g.
Your MySQL connection id is 4
Server version: 5.7.20 Source distribution
Copyright (c) 2000, 2017, Oracle and/or its affiliates. All rights reserved.
Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.
Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.
mysql> CHANGE master to master_host='192.168.237.128',master_user='myslave',master_password='123456',master_log_file='mysql-bin.000001',master_log_pos=604; #配置同步，注意 master_log_file 和 master_log_pos 的值要与Master查询的一致
Query OK, 0 rows affected, 2 warnings (0.01 sec)
mysql> start slave; #启动同步，如有报错执行 reset slave;
Query OK, 0 rows affected (0.00 sec)
mysql> show slave status\G #查看 Slave 状态
*************************** 1. row ***************************
Slave_IO_State: Waiting for master to send event
Master_Host: 192.168.237.128
Master_User: myslave
Master_Port: 3306
Connect_Retry: 60
Master_Log_File: mysql-bin.000001
Read_Master_Log_Pos: 604
Relay_Log_File: relay-log-bin.000002
Relay_Log_Pos: 320
Relay_Master_Log_File: mysql-bin.000001
Slave_IO_Running: Yes #负责与主机的io通信
Slave_SQL_Running: Yes #负责自己的slave mysql进程
Replicate_Do_DB:
Replicate_Ignore_DB:
Replicate_Do_Table:
Replicate_Ignore_Table:
Replicate_Wild_Do_Table:
Replicate_Wild_Ignore_Table:
Last_Errno: 0
Last_Error:
Skip_Counter: 0
Exec_Master_Log_Pos: 604
Relay_Log_Space: 525
Until_Condition: None
Until_Log_File:
Until_Log_Pos: 0
Master_SSL_Allowed: No
Master_SSL_CA_File:
Master_SSL_CA_Path:
Master_SSL_Cert:
Master_SSL_Cipher:
Master_SSL_Key:
Seconds_Behind_Master: 0
Master_SSL_Verify_Server_Cert: No
Last_IO_Errno: 0
Last_IO_Error:
Last_SQL_Errno: 0
Last_SQL_Error:
Replicate_Ignore_Server_Ids:
Master_Server_Id: 11
Master_UUID: 026f0934-e325-11ec-8d46-000c29823512
Master_Info_File: /usr/local/mysql/data/master.info
SQL_Delay: 0
SQL_Remaining_Delay: NULL
Slave_SQL_Running_State: Slave has read all relay log; waiting for more updates
Master_Retry_Count: 86400
Master_Bind:
Last_IO_Error_Timestamp:
Last_SQL_Error_Timestamp:
Master_SSL_Crl:
Master_SSL_Crlpath:
Retrieved_Gtid_Set:
Executed_Gtid_Set:
Auto_Position: 0
Replicate_Rewrite_DB:
Channel_Name:
Master_TLS_Version:
1 row in set (0.00 sec)
验证主从复制：
主服务器：
mysql> create database db_test; #创建db_test库
Query OK, 1 row affected (0.01 sec)
从服务器：
mysql> show databases; #查看从服务器有db_test库
+--------------------+
| Database |
+--------------------+
| information_schema |
| db_test |
| mysql |
| performance_schema |
| sys |
+--------------------+
5 rows in set (0.02 sec)
关于主从复制的延迟问题：
问题一：主库的从库太多，导致复制延迟
从库数量以3~5个为宜，要复制的从节点数量过多，会导致复制延迟。
问题二：从库硬件比主库差，导致复制延迟。
查看Master和Slave的系统配置，可能会因为机器配置不当，包括磁盘I/O，CPU，内存
等各方面因素造成复制的延迟。这一般发生在高并发大数据量写入场景中。
问题三：慢SQL语句太多
假如一条SQL语句执行时间是20秒，那么从执行完毕到从库上能查到数据至少需要20
秒，这样就延迟20秒了。
一般要把SQL语句的优化作为常规工作，不断的进行监控和优化，如果单个SQL的写入时
间长，可以修改后分多次写入。通过查看慢查询日志或show full processlist命令，找出
执行时间长的查询语句或大的事务。
问题四：主从复制的设计问题
例如，主从复制单线程，如果主库写并发太大，来不及传送到从库，就会导致延迟。
更高版本的MySQL可以支持多线程复制，门户网站则会自己开发多线程同步功能。
问题五：主从库之间的网络延迟
主从库的网卡，网线，连接的交换机等网络设备都可能成为复制的瓶颈，导致复制延
迟，另外，跨公网主从复制很容易导致主从复制延迟。
问题六：主库读写压力大，导致复制延迟。
主库硬件需提升，架构的前端要加buffer及缓存层。
读写分离
amoeba服务器配置：
#因为 Amoeba 基于是 jdk1.5 开发的，所以官方推荐使用 jdk1.5 或 1.6 版本，高版本不建议使用。
[root@192 opt]# cd /opt/
[root@192 opt]# cp jdk-6u14-linux-x64.bin /usr/local/
[root@192 opt]# cd /usr/local/
[root@192 local]# chmod +x jdk-6u14-linux-x64.bin
[root@192 local]# ./jdk-6u14-linux-x64.bin #执行jdk文件安装
Do you agree to the above license terms? [yes or no]
yes
[root@192 local]# mv jdk1.6.0_14/ /usr/local/jdk1.6
[root@192 local]# vim /etc/profile #配置变量
export JAVA_HOME=/usr/local/jdk1.6
export CLASSPATH=.:$JAVA_HOME/lib:$JAVA_HOME/jre/lib
export PATH=$JAVA_HOME/bin:$JAVA_HOME/jre/bin:$PATH
export AMOEBA_HOME=/usr/local/amoeba
export PATH=$PATH:$AMOEBA_HOME/bin
:wq
[root@192 local]# source /etc/profile #刷新配置文件
[root@192 local]# java -version #查看jdk版本
java version "1.6.0_14"
Java(TM) SE Runtime Environment (build 1.6.0_14-b08)
Java HotSpot(TM) 64-Bit Server VM (build 14.0-b16, mixed mode)
[root@192 opt]# tar zxvf amoeba-mysql-binary-2.2.0.tar.gz -C /usr/local/amoeba/ #解压amoeba工具
bin/
bin/amoeba
bin/amoeba.bat
bin/amoeba.classworlds
lib/
lib/classes/
LICENSE.txt
README.html
changelogs.txt
lib/amoeba-2.2.0.jar
lib/amoeba-mysql-2.2.0.jar
lib/amoeba-mysql-test-2.2.0.jar
lib/amoeba-test-2.2.0.jar
lib/classworlds-1.0.jar
lib/commons-collections-3.1.jar
lib/commons-digester-1.8.jar
lib/commons-lang-2.1.jar
lib/commons-logging-1.1.jar
lib/commons-pool-1.5.4.jar
lib/javassist-3.7.ga.jar
lib/jdbc-proxy-1.1.jar
lib/jdbc4_part.jar
lib/junit-4.3.jar
lib/log4j-1.2.12.jar
lib/ognl-2.7.2.jar
bin/
bin/benchmark
bin/benchmark.bat
bin/benchmark.classworlds
benchmark/
conf/
benchmark/context.xml
benchmark/objectMap.dtd
benchmark/query.xml
conf/access_list.conf
conf/amoeba.dtd
conf/amoeba.xml
conf/dbServers.xml
conf/dbserver.dtd
conf/function.dtd
conf/functionMap.xml
conf/log4j.dtd
conf/log4j.xml
conf/rule.dtd
conf/rule.xml
conf/ruleFunctionMap.xml
[root@192 opt]# chmod -R 755 /usr/local/amoeba/ #赋予权限
[root@192 opt]# /usr/local/amoeba/bin/amoeba #尝试开启，验证下是否安装成功
amoeba start|stop
主服务器，从服务器都配置：
mysql> grant all on *.* to test@'192.168.237.%' identified by '123.com'; #赋予权限给amoeba访问
Query OK, 0 rows affected, 1 warning (0.00 sec)
amoeba服务器配置：
[root@192 opt]# cd /usr/local/amoeba/conf/
[root@192 conf]# cp amoeba.xml amoeba.xml.bak #备份配置文件
[root@192 conf]# vim amoeba.xml
--30行--
<property name="user">amoeba</property>
--32行--
<property name="password">123456</property>
--115行--
<property name="defaultPool">master</property>
--117-去掉注释-
<property name="writePool">master</property>
<property name="readPool">slaves</property>
：wq
[root@192 conf]# cp dbServers.xml dbServers.xml.bak #备份数据库配置文件
[root@192 conf]# vim dbServers.xml #修改数据库配置文件
--23行--注释掉 作用：默认进入test库 以防mysql中没有test库时，会报错
<!-- <property name="schema">test</property> -->
--26--修改
<property name="user">test</property>
--28-30--去掉注释
<property name="password">123.com</property>
--45--修改，设置主服务器的名Master
<dbServer name="master" parent="abstractServer">
--48--修改，设置主服务器的地址
<property name="ipAddress">192.168.80.10</property>
--52--修改，设置从服务器的名slave1
<dbServer name="slave1" parent="abstractServer">
--55--修改，设置从服务器1的地址
<property name="ipAddress">192.168.80.11</property>
--58--复制上面6行粘贴，设置从服务器2的名slave2和地址
<dbServer name="slave2" parent="abstractServer">
<property name="ipAddress">192.168.80.12</property>
--65行--修改
<dbServer name="slaves" virtual="true">
--71行--修改
<property name="poolNames">slave1,slave2</property>
：wq
[root@192 conf]# /usr/local/amoeba/bin/amoeba start&
[3] 4667
[root@192 conf]# remote application= .Amoeba:51364 response OK
amoeba server is running with port=51364
[root@192 ~]# netstat -anpt|grep java
tcp6 0 0 :::8066 :::* LISTEN 4593/java
tcp6 0 0 127.0.0.1:51364 :::* LISTEN 4593/java
tcp6 0 0 192.168.237.138:44082 192.168.237.129:3306 ESTABLISHED 4593/java
tcp6 0 0 192.168.237.138:33778 192.168.237.148:3306 ESTABLISHED 4593/java
tcp6 0 0 192.168.237.138:53378 192.168.237.128:3306 ESTABLISHED 4593/java
测试：
客户端：
[root@192 ~]# systemctl start mysqld
[root@192 ~]# mysql -u amoeba -p123456 -h 192.168.237.138 -P8066 #通过amoeba服务器代理访问mysql ，在通过客户端连接mysql后写入的数据只有主服务会记录，然后同步给从服务器
mysql: [Warning] Using a password on the command line interface can be insecure.
Welcome to the MySQL monitor. Commands end with ; or \g.
Your MySQL connection id is 456208447
Server version: 5.1.45-mysql-amoeba-proxy-2.2.0 Source distribution
Copyright (c) 2000, 2017, Oracle and/or its affiliates. All rights reserved.
Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.
Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.
主服务器：
mysql> use db_test;
Database changed
mysql> create table test (id int(10),name varchar(10),address varchar(20));
Query OK, 0 rows affected (0.02 sec)
从服务器：
mysql> stop slave; #关闭同步
Query OK, 0 rows affected (0.00 sec)
mysql> use db_test;
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -A
Database changed
从服务器1：
mysql> insert into test values('1','zhangsan','this_is_slave1');
Query OK, 1 row affected (0.01 sec)
从服务器2：
mysql> insert into test values('2','lisi','this_is_slave2');
Query OK, 1 row affected (0.00 sec)
主服务器：
mysql> insert into test values('3','wangwu','this_is_master');
Query OK, 1 row affected (0.00 sec)
客户端：
mysql> use db_test;
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -A
Database changed
mysql> select * from test;
+------+----------+----------------+
| id | name | address |
+------+----------+----------------+
| 1 | zhangsan | this_is_slave1 |
+------+----------+----------------+
1 row in set (0.00 sec)
mysql> select * from test;
+------+------+----------------+
| id | name | address |
+------+------+----------------+
| 2 | lisi | this_is_slave2 |
+------+------+----------------+
1 row in set (0.01 sec)
mysql> select * from test;
+------+----------+----------------+
| id | name | address |
+------+----------+----------------+
| 1 | zhangsan | this_is_slave1 |
+------+----------+----------------+
1 row in set (0.01 sec)
mysql> select * from test;
+------+------+----------------+
| id | name | address |
+------+------+----------------+
| 2 | lisi | this_is_slave2 |
+------+------+----------------+
1 row in set (0.00 sec)
注：只有两个从服务器中插入的数据，没有主服务器插入的数据。
客户端：
mysql> insert into test values('4','qianqi','this_is_client');
Query OK, 1 row affected (0.01 sec)
从服务器1：
mysql> select * from test;
+------+----------+----------------+
| id | name | address |
+------+----------+----------------+
| 1 | zhangsan | this_is_slave1 |
+------+----------+----------------+
1 row in set (0.00 sec)
从服务器2：
mysql> select * from test;
+------+------+----------------+
| id | name | address |
+------+------+----------------+
| 2 | lisi | this_is_slave2 |
+------+------+----------------+
1 row in set (0.00 sec)
主服务器：
mysql> select * from test;
+------+--------+----------------+
| id | name | address |
+------+--------+----------------+
| 3 | wangwu | this_is_master |
| 4 | qianqi | this_is_client |
+------+--------+----------------+
2 rows in set (0.00 sec)
注：只有主服务器有数据，2个从服务器没有插入的数据。
从服务器1：
mysql> start slave; #开启同步
Query OK, 0 rows affected, 1 warning (0.00 sec)
mysql> select * from test;
+------+----------+----------------+
| id | name | address |
+------+----------+----------------+
| 1 | zhangsan | this_is_slave1 |
| 3 | wangwu | this_is_master |
| 4 | qianqi | this_is_client |
+------+----------+----------------+
3 rows in set (0.00 sec)
从服务器2：
mysql> start slave; #开启同步
Query OK, 0 rows affected (0.00 sec)
mysql> select * from test;
+------+--------+----------------+
| id | name | address |
+------+--------+----------------+
| 2 | lisi | this_is_slave2 |
| 3 | wangwu | this_is_master |
| 4 | qianqi | this_is_client |
+------+--------+----------------+
3 rows in set (0.00 sec)
注：开启同步，数据同步到从服务器1和从服务器2。
Mysql主从复制的同步模式
-
异步复制（Asynchronous replication）
MySQL默认的复制即是异步的，主库在执行完客户端提交的事务后会立即将结果返给客户端，并不关心从库是否已经接收并处理，这样就会有一个问题，主如果crash掉了，此时主上已经提交的事务可能并没有传到从上，如果此时，强行将从提升为主，可能导致新主上的数据不完整。 -
全同步复制（Fully synchronous replication）
指当主库执行完一个事务，所有的从库都执行了该事务才返回给客户端。因为需要等待所有从库执行完该事务才能返回，所以全同步复制的性能必然会收到严重的影响。 -
半同步复制（Semisynchronous replication）
介于异步复制和全同步复制之间，主库在执行完客户端提交的事务后不是立刻返回给客户端，而是等待至少一个从库接收到并写到relay log中才返回给客户端。相对于异步复制，半同步复制提高了数据的安全性，同时它也造成了一定程度的延迟，这个延迟最少是一个TCP/IP往返的时间。所以，半同步复制最好在低延时的网络中使用。
主服务器：
[root@localhost ~]# vim /etc/my.cnf #在 [mysqld] 区域添加下面内容
......
plugin-load=rpl_semi_sync_master=semisync_master.so #加载mysql半同步复制的插件
rpl_semi_sync_master_enabled=ON #或者设置为"1"，即开启半同步复制功能
rpl-semi-sync-master-timeout=1000 #超时时间为1000ms，即1s
：wq
[root@localhost ~]# systemctl restart mysqld
从服务器：
[root@localhost ~]# vim /etc/my.cnf
......
plugin-load=rpl_semi_sync_slave=semisync_slave.so
rpl_semi_sync_slave_enabled=ON
[root@localhost ~]# systemctl restart mysqld
主服务器：
mysql> show status like 'Rpl_semi_sync_master_status'; #查看是否开启半同步复制
+-----------------------------+-------+
| Variable_name | Value |
+-----------------------------+-------+
| Rpl_semi_sync_master_status | ON |
+-----------------------------+-------+
1 row in set (0.00 sec)
mysql> show variables like 'rpl_semi_sync_master_timeout'; #查看超过时间是否是自己设置的时间
+------------------------------+-------+
| Variable_name | Value |
+------------------------------+-------+
| rpl_semi_sync_master_timeout | 1000 |
+------------------------------+-------+
1 row in set (0.00 sec)
从服务器：
mysql> show status like 'Rpl_semi_sync_slave_status'; #查看是否开启半同步复制
+----------------------------+-------+
| Variable_name | Value |
+----------------------------+-------+
| Rpl_semi_sync_slave_status | ON |
+----------------------------+-------+
1 row in set (0.00 sec)
注：如果显示是off，没有开启，则需要重启IO线程后，从库半同步状态才会为ON
STOP SLAVE IO_THREAD;
START SLAVE IO_THREAD;
主服务器：
mysql> show status like '%Rpl_semi%';
+--------------------------------------------+-------+
| Variable_name | Value |
+--------------------------------------------+-------+
| Rpl_semi_sync_master_clients | 1 | #半同步复制客户端的个数
| Rpl_semi_sync_master_net_avg_wait_time | 0 | #平均等待时间（默认毫秒）
| Rpl_semi_sync_master_net_wait_time | 0 | #总共等待时间
| Rpl_semi_sync_master_net_waits | 0 | #等待次数
| Rpl_semi_sync_master_no_times | 0 | #关闭半同步复制的次数
| Rpl_semi_sync_master_no_tx | 0 | #表示没有成功接收slave提交的次数
| Rpl_semi_sync_master_status | ON | #表示当前是异步模式还是半同步模式，on为半同步
| Rpl_semi_sync_master_timefunc_failures | 0 | #调用时间函数失败的次数
| Rpl_semi_sync_master_tx_avg_wait_time | 0 | #事物的平均传输时间
| Rpl_semi_sync_master_tx_wait_time | 0 | #事物的总共传输时间
| Rpl_semi_sync_master_tx_waits | 0 | #事物等待次数
| Rpl_semi_sync_master_wait_pos_backtraverse | 0 | #可以理解为"后来的先到了，而先来的还没有到的次数"
| Rpl_semi_sync_master_wait_sessions | 0 | #当前有多少个session因为slave的回复而造成等待
| Rpl_semi_sync_master_yes_tx | 0 | #成功接受到slave事物回复的次数
+--------------------------------------------+-------+
14 rows in set (0.01 sec)
当半同步复制发生超时（由rpl_semi_sync_master_timeout参数控制，默认为10000ms，即10s），会暂时关闭半同步复制，转而使用异步复制，也就是会自动降为异步工作。
当 master dump 线程发送完一个事务的所有事件之后，如果在 rpl_semi_sync_master_timeout 内，收到了从库的响应， 则主从又重新恢复为半同步复制。
注：
- 在一主多从的架构中，如果要开启半同步复制，并不要求所有的从都是半同步复制。
- MySQL 5.7极大的提升了半同步复制的性能。5.6 版本的半同步复制，dump thread 承担了两份不同且又十分频繁的任务：传送binlog 给 slave ，还需要等待 slave 反馈信息，而且这两个任务是串行的，dump thread 必须等待 slave 返回之后才会传送下一个 events 事务。dump thread 已然成为整个半同步提高性能的瓶颈。在高并发业务场景下，这样的机制会影响数据库整体的系统吞吐量(TPS)。
5.7 版本的半同步复制中，独立出一个 ack collector thread ，专门用于接收 slave 的反馈信息。这样 master 上有两个线程独立工作，可以同时发送 binlog 到 slave ，和接收 slave 的反馈。
2750
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
