前言:在我之前的博客里也搭建过LAMP和LNMP,做过了web服务器群集,网站的数据有很多是存储在数据库里面的,例如注册的会员,发的文章,购物的订单等信息。当然我们可以给数据库做备份,但是如果每天00:00做一次备份,那么如果在23:59数据丢失了,那么就会丢失一天的数据,有没有一种方法能实现实时备份,就是说有数据产生就立即备份,今天的MySQL主从复制就实现了这个过程。有点类似于之前我写过的rsync,但是不同的是rsync是对磁盘文件做备份,而mysql主从复制是对数据库中的数据,语句做备份。另外读写分离主要是为了优化数据库。接下来带大家了解一下主从复制以及读写分离的原理。
一、mysql主从复制的工作原理
1、mysq支持的复制类型
1)基于语句的复制。在服务器上执行sql语句,在从服务器上执行同样的语句,mysql默认采用基于语句的复制,执行效率高。
2)基于行的复制。把改变的内容复制过去,而不是把命令在从服务器上执行一遍。
3)混合类型的复制。默认采用基于语句的复制,一旦发现基于语句无法精确复制时,就会采用基于行的复制。
接下来就借着原理示意图再来一波解释:
1)在每个事务更新数据完成之前,master在二进制日志记录这些改变。写入二进制日志完成后,master通知存储引擎提交事务。
2)Slave将master的binary log复制到其中继日志。首先slave开始一个工作线程(I/O),I/O线程在master上打开一个普通的连接,然后开始binlog dump process。binlog dump process从master的二进制日志中读取事件,如果已经跟上master,它会睡眠并等待master产生新的事件,I/O线程将这些事件写入中继日志。
3)Sql slave thread(sql从线程)处理该过程的最后一步,sql线程从中继日志读取事件,并重放其中的事件而更新slave数据,使其与master中的数据一致,只要该线程与I/O线程保持一致,中继日志通常会位于os缓存中,所以中继日志的开销很
小。
2、mysql读写分离原理
读写分离就是在主服务器上修改,数据会同步到从服务器,从服务器只能提供读取数据,不能写入,实现备份的同时也实现了数据库性能的优化,以及提升了服务
器安全。
以下图作为主从复制的案例:
搭建mysql主从复制
1. 建立时间同步环境,在主节点上搭建时间同步服务器
a. 安装NTP
yum -y install ntp
b. 配置NTP
vim /etc/ntp.conf
server 127.127.1.0 //上游时间服务器为本机
fudge 127.127.1.0 stratum 8 //允许与上级时间服务器的时间偏移
c. 重启服务
service ntpd restart
2. 在从节点上进行时间同步(mysql从服务器两台都如此)
yum -y install ntpdate
/usr/sbin/ntpdate 192.168.1.2
3. 关闭每台服务器防火墙
service iptables stop
4. 安装mysql过程略 ,在我之前的部署LAMP博客里有详细安装过程
5. 启动mysql
6. 配置mysql主服务器
a. 在/etc/my.cnf中修改或增加下面内容
server-id = 11 //修改
log-bin=master-bin //修改,启用二进制日志,日志文件名称前缀
log-slave-updates=true //增加,允许从服务器复制
b. 重启mysql服务
service mysqld restart
c. 登录mysql程序,给从服务器以授权
mysql -u root -p
mysql> grant replication slave on *.* to 'myslave'@'192.168.1.%' identified by '123456';
mysql> flush privileges;
mysql> show master status;
7.配置两台从服务器
a. 在第一台从服务器/etc/my.cnf中修改或增加下面内容
server-id = 22 //修改
relay-log=relay-log-bin //增加
relay-log-index=slave-relay-bin.index //增加
b. 重启mysql服务
service mysqld restart
c. 第二台从服务器只是server-id不同其他都和第一台一样
server-id = 33 //修改
relay-log=relay-log-bin //增加
relay-log-index=slave-relay-bin.index //增加
完成后重启mysql服务
d. 登录mysql,配置同步
mysql>change to master master_host='192.168.1.2',master_user='myslave',master_password='123456',master_log_file='master-bin.000002',master_log_pos=412;
//可以变动
e. 启动同步
mysql> start slave;
f. 查看slave状态,确保以下两个至为YES
mysql> show slave status \G;
Slave_IO_Running: Yes
Slave_SQL_Running: Yes
g. 验证主从复制效果
在主、从服务器上登录mysql
mysql -u root -p
在主服务器上新建数据库db_test
mysql> create database db_tese;
在两台从服务器上查看数据库
> mysql> show databases;
+——————–+
| Database |
+——————–+
| information_schema |
| db_test |
| mysql |
| performance_schema |
| test |
+——————–+
5 rows in set (0.02 sec)
构建mysql读写分离
1. 在主机 amoeba上安装 java环境
[root@centos1 ~]# cp /mnt/jdk-6u14-linux-x64.bin /usr/local/
[root@centos1 ~]# chmod +x /usr/local/jdk-6u14-linux-x64.bin
[root@centos1 local]# cd /usr/local/
[root@centos1 local]# ./jdk-6u14-linux-x64.bin //根据提示按回车和yes即可
[root@centos1 local]# vim /etc/profile
export JAVA_HOME=/usr/local/jdk1.6
export CLASSPATH=$CLASSPATH:$JAVA_HOME/lib:$JAVA_HOME/jre/lib //指定类的搜索路径
export PATH=$JAVA_HOME/lib:$JAVA_HOME/jre/bin:$PATH:$HOME/bin
export AMOEBA_HOME=/usr/local/amoeba/
export PATH=$PATH:$AMOEBA_HOME/bin
[root@centos1 local]# mv jdk1.6.0_14/ /usr/local/jdk1.6
[root@centos1 local]# java -version //查看java版本
java version "1.6.0_14
OpenJDK Runtime Environment (rhel-2.4.3.3.el6-x86_64 u45-b15)
OpenJDK 64-Bit Server VM (build 24.45-b08, mixed mode)
java环境已经成功
2. 安装并配置amoeba软件
[root@centos1 local]# mkdir /usr/local/amoeba
[root@centos1 local]# tar zxf /mnt/amoeba-mysql-binary-2.2.0.tar.gz -C /usr/local/amoeba
[root@centos1 local]# chmod -R 755 /usr/local/amoeba/
[root@centos1 local]# /usr/local/amoeba/bin/amoeba
3. 配置amoeba读写分离,两个slave读负载均衡
a. master、slave1和slave2中开放权限给amoeba访问
mysql> grant all on . to ‘test’@’192.168.1.%’ identified by ‘123.com’;
b. 编辑amoeba.xml配置文件.
<property name="user">amoeba</property>
<property name="password">123456</property>
<property name="defaultPool">master</property>
<property name="writePool">master</property>
<property name="readPool">slaves</property>
c. 编辑dbServer.xml配置文件
<property name="user">test</property>
<property name="password">123.com</property>
<dbServer name="master" parent="abstractServer">
<factoryConfig>
<!-- mysql ip -->
<property name="ipAddress">192.168.1.2</property>
</factoryConfig>
</dbServer>
<dbServer name="slave1" parent="abstractServer">
<factoryConfig>
<!-- mysql ip -->
<property name="ipAddress">192.168.1.3</property>
</factoryConfig>
</dbServer>
<dbServer name="slave2" parent="abstractServer">
<factoryConfig>
<!-- mysql ip -->
<property name="ipAddress">192.168.1.4</property>
</factoryConfig>
</dbServer>
<dbServer name="slaves" virtual="true">
<poolConfig class="com.meidusa.amoeba.server.MultipleServerPool">
<!-- Load balancing strategy: 1=ROUNDROBIN , 2=WEIGHTBASED , 3=HA-->
<property name="loadbalance">1</property>
<!-- Separated by commas,such as: server1,server2,server1 -->
<property name="poolNames">slave1,slave2</property>
</poolConfig>
</dbServer>
d. 配置无误后,可以启动amoeba软件,默认端口为tcp8066
[root@centos1 amoeba]# bin/amoeba start &
4.测试
a. 在client主机上
yum -y install mysql
然后通过代理访问mysql 本机如果已安装可不用安装
[root@centos1 ~]# mysql -u amoeba -p123456 -h 192.168.1.1 -P8066 (-P为大写)
b. 在master上创建一个表,同步到各个从服务器上,然后关掉各从服务器的slave功能,再插入区别语句
mysql> use db_lxf
mysql> create table zang(id int(10),name varchar(10),address varchar(20));
c. 分别在两台从服务器上
mysql>stop slave;
d. 然后在主服务器上插入数据
mysql> insert inot zang values(‘1’,’zhang’,’this_is_master’);
e. 从服务器同步了表,手动插入其他内容
slave1:
mysql> use db_lxf
mysql> insert into zang values('2','zhang','this_is_slave1');
slave2:
mysql> use db_lxf
mysql> insert into zang values('2','zhang','this_is_slave2');
f. 测试读操作
在client主机上第一次查询的结果如下:
mysql> use db_lxf
mysql> select * from zang;
+——+——-+—————-+
| id | name | address |
+——+——-+—————-+
| 3 | zhang | this_is_slave1 |
+——+——-+—————-+
1 row in set (0.03 sec)
第二次查询结果如下:
mysql> select * from zang;
+——+——-+—————-+
| id | name | address |
+——+——-+—————-+
| 2 | zhang | this_is_slave2 |
测试写操作在客户端:
mysql> insert into zang values(‘4’,’zhang’,’write_test’);
但是在客户机上查询不到
最终只能在主服务器上才能看到这条语句内容,说明写操作在master服务器上
mysql> select * from zang;
+——+——-+—————-+
| id | name | address |
+——+——-+—————-+
| 1 | zhang | this_is_master |
| 4 | zhang | write_test |
+——+——-+—————-+
2 rows in set (0.03 sec)
在主服务器mysql上进行验证:
其他两个从服务器上查看: