（简单易懂！Come on！）理论+实验——MySQL 读写分离

最新推荐文章于 2024-08-06 22:13:24 发布

Jessica丶唯

最新推荐文章于 2024-08-06 22:13:24 发布

阅读量456

点赞数 3

分类专栏：数据库集群 MySQL 理论+实验

本文链接：https://blog.csdn.net/ZG_66/article/details/108621979

版权

理论+实验同时被 3 个专栏收录

40 篇文章 0 订阅

订阅专栏

MySQL

7 篇文章 0 订阅

订阅专栏

数据库集群

3 篇文章 0 订阅

订阅专栏

文章目录

一、概述
- 1.1、原因
- 1.2、原理
二、MySQL 主从复制原理及配置
三、实验

一、概述

1.1、原因

在企业应用中，在大量的数据请求下，单台数据库将无法承担所有的读写操作
配置多台数据库服务器以实现读写分离
读写分离建立在主从复制的基础上

1.2、原理

读写分离就是只在主服务器上写，只在从服务器上读
主数据库处理事务性查询，而从数据库处理 select 查询
数据库复制被用来把事务性查询导致的变更同步到集群中的从数据库

目前比较常见的MySQL读写分离分为二种：
（1）基于程序代码内部实现
在代码中根据select、insert进行路由分类，这类方法也是目前生产环境应用广泛的，优点是性能较好，因为
在程序代码中实现，不需要增加额外的设备作为硬件开支；缺点是需要开发人员来实现，运维人员无从下手。
（2）基于中间代理层实现
代理一般位于客户端和服务器之间，代理服务器接受到客户端的请求后通过判断后转发到后端数据库，有二个代表性程序：

MySQL-Proxy。 ----MySQL的开源项目，通过自带的lua脚本进行SQL判断，MySQL官方不建议用这个在生产环境中
Amoeba（变形虫） ----由陈思儒开发，曾就职于阿里巴巴，该程序由Java语言开发，阿里将其用于生产环境

但是它不支持事物和存储过程。
在这里插入图片描述

二、MySQL 主从复制原理及配置

上篇博客有所描述，本次案例实施基于主从复制基础，详情请看：https://blog.csdn.net/ZG_66/article/details/108578383

三、实验

3.1、开局

实验环境防火墙和核心防护均已关闭

systemctl stop firewalld.service 
setenforce 0

3.1.1、VMware 主机

五台centos7.6 主机
一台做客户端 ip地址为 20.0.0.25
一台做amoeba ip地址为 20.0.0.24
一台主mysql服务器 ip地址为 20.0.0.21
两台从mysql服务器 ip地址为 20.0.0.22和20.0.0.23

3.1.2、拓扑图

在这里插入图片描述

3.2、过程

3.2.1、搭建mysql主从复制环境

Mysql 主从复制的博客地址：https://blog.csdn.net/ZG_66/article/details/108578383

3.2.2、安装配置Amoeba（20.0.0.24）

（1）卸载原有的java环境

[root@amoeba ~]# java -version    ##确定java版本
openjdk version "1.8.0_181"
OpenJDK Runtime Environment (build 1.8.0_181-b13)
OpenJDK 64-Bit Server VM (build 25.181-b13, mixed mode)
[root@amoeba ~]# rpm -qa |grep java
java-1.8.0-openjdk-headless-1.8.0.181-7.b13.el7.x86_64         ###卸载之前的java重装
tzdata-java-2018e-3.el7.noarch
python-javapackages-3.4.1-11.el7.noarch
java-1.8.0-openjdk-1.8.0.181-7.b13.el7.x86_64
javapackages-tools-3.4.1-11.el7.noarch
java-1.7.0-openjdk-1.7.0.191-2.6.15.5.el7.x86_64
java-1.7.0-openjdk-headless-1.7.0.191-2.6.15.5.el7.x86_6
[root@amoeba ~]#  rpm -e --nodeps java-1.8.0-openjdk-headless-1.8.0.181-7.b13.el7.x86_64
[root@amoeba ~]#  rpm -e --nodeps java-1.8.0-openjdk-1.8.0.181-7.b13.el7.x86_64
[root@amoeba ~]#  rpm -e --nodeps java-1.7.0-openjdk-1.7.0.191-2.6.15.5.el7.x86_64
[root@amoeba ~]#  rpm -e --nodeps java-1.7.0-openjdk-headless-1.7.0.191-2.6.15.5.el7.x86_64

（2）安装JDK
上传JDK到opt目录

[root@amoeba ~]# cd /opt
[root@amoeba opt]# tar xzvf jdk-8u144-linux-x64.tar.gz
[root@amoeba opt]# cp -rv jdk1.8.0_144/ /usr/local/java
[root@amoeba opt]# vi /etc/profile                ###在最后添加下面四行
export JAVA_HOME=/usr/local/java
export JRE_HOME=/usr/local/java/jre
export PATH=$PATH:/usr/local/java/bin
export CLASSPATH=./:/usr/local/java/lib:/usr/local/java/jre/lib         ###类文件
[root@amoeba opt]# source /etc/profile
[root@amoeba opt]# java -version
java version "1.8.0_144"
Java(TM) SE Runtime Environment (build 1.8.0_144-b01)
Java HotSpot(TM) 64-Bit Server VM (build 25.144-b01, mixed mode)

（3）安装amoeba
上传包到opt目录

[root@amoeba opt]# unzip amoeba-mysql-3.0.5-RC-distribution.zip -d /usr/local/
[root@amoeba opt]# mv /usr/local/amoeba-mysql-3.0.5-RC/ /usr/local/amoeba
[root@amoeba opt]# chmod -R 755 /usr/local/amoeba/
[root@amoeba opt]# vi /usr/local/amoeba/jvm.properties
JVM_OPTIONS="-server -Xms256m -Xmx1024m -Xss196k -XX:PermSize=16m -XX:MaxPermSize=96m"         ###32行修改成如下
JVM_OPTIONS="-server -Xms1024m -Xmx1024m -Xss256k"

（4）制作amoeba管理脚本

[root@amoeba opt]# vi /etc/init.d/amoeba
#!/bin/bash
#chkconfig: 35 62 62
#
export JAVA_HOME=/usr/local/java
export PATH=$JAVA_HOME/bin:$JAVA_HOME/jre/bin:$PATH
NAME=Amoeba
AMOEBA_BIN=/usr/local/amoeba/bin/launcher
SHUTDOWN_BIN=/usr/local/amoeba/bin/shutdown
PIDFILE=/usr/local/amoeba/Amoeba-MySQL.pid
SCRIPTNAME=/etc/init.d/amoeba

case "$1" in
start)
echo -n "Starting $NAME... "
$AMOEBA_BIN
echo " done"
;;
stop)
echo -n "Stoping $NAME... "
$SHUTDOWN_BIN
echo " done"
;;
restart)
$SHUTDOWN_BIN
sleep 1
$AMOEBA_BIN
;;
*)
echo "Usage: $SCRIPTNAME {start|stop|restart}"
exit 1
;;
esac
"/etc/rc.d/init.d/amoeba" [New] 32L, 544C written
[root@amoeba opt]# chmod +x /etc/init.d/amoeba
[root@amoeba opt]# chkconfig --add amoeba
[root@amoeba opt]# service amoeba start
[root@amoeba opt]# netstat -anpt | grep 8066
tcp6       0      0 :::8066                 :::*                    LISTEN      20226/java

3.2.3、配置Amoeba 读写分离，两个Slave 读负载均衡

（1）三台mysql服务器添加权限和用户开放给amoeba访问
登录主（20.0.0.21）终端

[root@master ~]# mysql -u root -p
Enter password: 

mysql> create database test;
Query OK, 1 row affected (0.00 sec)

mysql> GRANT ALL  ON *.* TO test@'20.0.0.%' IDENTIFIED BY 'abc123';
Query OK, 0 rows affected, 1 warning (0.01 sec)

mysql>  FLUSH PRIVILEGES;
Query OK, 0 rows affected (0.00 sec)

登录从1（20.0.0.22）终端

[root@slave1 ~]# mysql -u root -p 
Enter password: 

mysql> GRANT ALL  ON *.* TO test@'20.0.0.%' IDENTIFIED BY 'abc123';
Query OK, 0 rows affected, 1 warning (0.00 sec)

mysql> FLUSH PRIVILEGES;
Query OK, 0 rows affected (0.01 sec)

登录从2（20.0.0.23）终端

[root@slave2 ~]#  mysql -u root -p  
Enter password: 

mysql>  GRANT ALL  ON *.* TO test@'20.0.0.%' IDENTIFIED BY 'abc123';
Query OK, 0 rows affected, 1 warning (0.00 sec)

mysql> FLUSH PRIVILEGES;
Query OK, 0 rows affected (0.02 sec)

（2）配置amoeba服务器

[root@amoeba opt]# cd /usr/local/amoeba
[root@amoeba amoeba]# vi conf/amoeba.xml
---28行-----设置客户端连接amoeba前端服务器时使用的用户名和密码----
 <property name="user">amoeba</property>
----30行---------
 <property name="password">123456</property>
------------------------------------以上配置用于客户端连接用户名密码-------------

---83-去掉注释-同时把默认的server1改成master,把默认的servers改成 slaves
 <property name="defaultPool">master</property>
 <property name="writePool">master</property>
 <property name="readPool">slaves</property>
######上面修改后如下####   <!--  -->  这种注释一定要去掉
     82                 <property name="LRUMapSize">1500</property>
     83                 <property name="defaultPool">master</property>
     84                 <property name="writePool">master</property>
     85                 <property name="readPool">slaves</property>
     86                 <property name="needParse">true</property>

[root@amoeba amoeba]# vi conf/dbServers.xml
--26-29--去掉注释--
 <property name="user">test</property>
   
 <property name="password">abc123</property>

------主服务器地址---
 43 <dbServer name="master"  parent="abstractServer">
 46 <property name="ipAddress">20.0.0.21</property>

--50-从服务器主机名-
<dbServer name="slave1"  parent="abstractServer">
--53-从服务器地址-
 <property name="ipAddress">20.0.0.22</property>
 -----------------省略------------------------
<!-- mysql port -->
<property name="port">3306</property>

 <!-- mysql schema -->
 <property name="schema">test</property>

<!-- mysql user -->
<property name="user">test</property>                #####user 后面改成test 这边是mysql数据库授权账户

<property name="password">abc123</property>         #####password 后面改成abc123  这是mysql数据库授权密码
</factoryConfig>
 
--------------省略-------------------------

        <dbServer name="master"  parent="abstractServer">        #####name后面改成 master
                <factoryConfig>
                        <!-- mysql ip -->
                        <property name="ipAddress">20.0.0.21</property>    ####ipAddress加上主mysql的IP地址
                </factoryConfig>
        </dbServer>

        <dbServer name="slave1"  parent="abstractServer">        #####name后面改成 slave1
                <factoryConfig>
                        <!-- mysql ip -->
                        <property name="ipAddress">20.0.0.22</property>    ###ipAddress加上从1mysql的IP地址
                </factoryConfig>
        </dbServer>
###注意啦！在脚本中slave2是没有的，需要复制下#####
        <dbServer name="slave2"  parent="abstractServer">        #####name后面改成 slave2
                 <factoryConfig>
                        <!-- mysql ip -->
                        <property name="ipAddress">20.0.0.23</property>   ###ipAddress加上从2mysql的IP地址
                 </factoryConfig>
        </dbServer>
        
        <dbServer name="slaves" virtual="true">                 #####name后面改成 slaves
                <poolConfig class="com.meidusa.amoeba.server.MultipleServerPool">
                        <!-- Load balancing strategy: 1=ROUNDROBIN , 2=WEIGHTBASED , 3=HA-->
                        <property name="loadbalance">1</property>

                        <!-- Separated by commas,such as: server1,server2,server1 -->
                        <property name="poolNames">slave1,slave2</property>            #####poolNames后面改成 slave1,slave2
                </poolConfig>
        </dbServer> 
 
-----------------------注意----------------------

<!-- mysql schema -->
<property name="schema">test</property> //数据库中要有此处定义的数据库，否则客户端连接后会报如下错误：
ERROR 1044 (42000): Could not create a validated object, cause: ValidateObject failed

（3）启动Amoeba软件

[root@amoeba amoeba]# service amoeba restart
[root@amoeba amoeba]#  netstat -anpt | grep java
tcp6       0      0 :::8066                 :::*                    LISTEN      72410/java          
tcp6       0      0 20.0.0.24:60102         20.0.0.21:3306          ESTABLISHED 72410/java          
tcp6       0      0 20.0.0.24:52726         20.0.0.22:3306          ESTABLISHED 72410/java          
tcp6       0      0 20.0.0.24:43044         20.0.0.23:3306          ESTABLISHED 72410/java

3.2.4、验证

（1）客户端安装mysql
由于是用来验证，所以可以直接用yum安装

[root@client ~]# yum install -y mysql
[root@client ~]# mysql -u amoeba -p123456 -h 20.0.0.24 -P8066

（2）在主mysql上创建数据库 20.0.0.21

[root@master ~]# mysql -u root -p
Enter password: 

mysql> use test;
Database changed
mysql> create table zhang1 (id int(10),name varchar(10),address varchar(20));
Query OK, 0 rows affected (0.00 sec)

（3）在从1 mysql关闭同步 20.0.0.22

[root@slave1 ~]# mysql -u root -p
Enter password: 

mysql> stop slave;
Query OK, 0 rows affected (0.00 sec)

mysql> use test;
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -A

Database changed
mysql> insert into zhang1 values('2','zhang','this_is_slave1');
Query OK, 1 row affected (0.00 sec)

（4）在从2 mysql关闭同步 20.0.0.23

[root@slave2 ~]# mysql -u root -p
Enter password: 

mysql> stop slave;
Query OK, 0 rows affected (0.00 sec)

mysql>  use test;
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -A

Database changed
mysql>  insert into zhang1 values('3','zhang','this_is_slave2');
Query OK, 1 row affected (0.00 sec)

（5）在主mysql上插入数据 20.0.0.21

mysql> insert into zhang1 values('1','zhang','this_is_master');
Query OK, 1 row affected (0.01 sec)

（6）登录客户端 20.0.0.25

[root@client ~]# mysql -u amoeba -p123456 -h 20.0.0.24 -P8066

MySQL [(none)]> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| lx                 |
| mysql              |
| performance_schema |
| sys                |
| test               |
+--------------------+
6 rows in set (0.01 sec)


MySQL [(none)]> use test;
Database changed
MySQL [test]> select * from zhang1; 
+------+-------+----------------+
| id   | name  | address        |
+------+-------+----------------+
|    2 | zhang | this_is_slave1 |
+------+-------+----------------+
1 row in set (0.00 sec)


MySQL [test]> select * from zhang1;  
+------+-------+----------------+
| id   | name  | address        |
+------+-------+----------------+
|    3 | zhang | this_is_slave2 |
+------+-------+----------------+
1 row in set (0.00 sec)

上述实验，实现了数据读取负载均衡

（7）在客户机上 20.0.0.25 继续写输数据，按照正常的规则应该是slave1 和slave2是看不见的

MySQL [test]> insert into zhang1 values('4','zhang','write_test');

登录mastar 20.0.0.21

mysql> select * from zhang1;
+------+-------+----------------+
| id   | name  | address        |
+------+-------+----------------+
|    1 | zhang | this_is_master |
|    4 | zhang | write_test     |
+------+-------+----------------+
2 rows in set (0.00 sec)

登录slave1 20.0.0.22

mysql> select * from zhang1; 
+------+-------+----------------+
| id   | name  | address        |
+------+-------+----------------+
|    2 | zhang | this_is_slave1 |
+------+-------+----------------+
1 row in set (0.00 sec)

登录slave2 20.0.0.23

mysql> select * from zhang1; 
+------+-------+----------------+
| id   | name  | address        |
+------+-------+----------------+
|    3 | zhang | this_is_slave2 |
+------+-------+----------------+
1 row in set (0.00 sec)