MySQL主从同步和读写分离实践
1.主从同步机制
- 在多台数据服务器中,分为主服务器和从服务器。一台主服务器对应多台从服务器
- 主服务器只负责写入数据,从服务器只负责同步主服务器的数据,并让外部程序读取数据。
- 主服务器写入数据后,即刻将写入数据的命令发送给从服务器,从而使得主从数据同步。
- 应用程序可以随机读取某一台从服务器的数据,这样就可以分摊读取数据的压力。
- 当从服务器不能工作时,整个系统将不受影响;当主服务器不能工作时,可以方便地从从服务器选举一台来当主服务器
主从同步的优点:
提高读写性能,提高数据的安全性
MySQL服务器之间的主从同步是基于二进制日志机制,主服务器使用二进制日志来记录数据库的变动情况,从服务器通过读取和执行该日志文件来保持和主服务器的数据一致。
2.Docker安装运行MySQL从机(在一台机器上模拟主从同步)
- 获取MySQL镜像
sudo docker image pull mysql:5.7.22
或者
sudo docker -i load mysql压缩包路径
- 指定MySQL从机配置文件
可以直接将主机的配置文件拷贝到从机中
cd ~
mkdir mysql_slave # 创建从机mysql文件目录
cd mysql_slave
mkdir data
cp -r /etc/mysql/mysql.conf.d ./
- 修改MySQL从机配置文件
编辑~/mysql_slave/mysql.conf.d/mysqld.cnf
# 设置从机端口号
port = 3307
# 关闭日志
general_log = 0
# 设置从机唯一编号
sever-id = 2
- Docker安装运行MySQL从机
sudo docker run --name mysql-slave -e MYSQL_ROOT_PASSWORD=mysql -d --netword=host -v /home/python/mysql_slave/data:/var/lib/mysql -v /home/python/mysql_slave/mysql.conf.d:/etc/mysql/mysql.conf.d mysql:5.7.22
# MYSQL_ROOT_PASSWORD:创建root用户的密码为mysql
# -v 主机路径:docker路径 映射目录
- 测试从机是否创建成功
mysql -uroot -pmysql -h 127.0.0.1 --port=3307
3.主从同步的实现
- 配置主机中的mysql
修改配置文件之后需要重启mysql
sudo service mysql restart
# 开启日志
general_log_file = /var/log/mysql/mysql.log
general_log = 1
# 主机唯一编号
server-id = 1
# 二进制日志文件
log_bin = /var/log/mysql/mysql-bin.log
- 从机备份主机原有数据
# 先将主机已有的数据copy到从机
# 将主机的数据生成sql文件
mysqldump -uroot -pmysql --all-databases --lock-all-tables > ~/master_db.sql
# 从机执行sql文件
mysql -uroot -pmysql -h127.0.0.1 --port=3307 < ~ /master_db.sql
- 创建用于从服务器同步数据的账号
# 登录主机
mysql -uroot -pmysql
# 创建从机账号
GRANT REPLICATION SLAVE ON *.* TO 'slave'@'%' identified by 'slave';
# 刷新权限
FLUSH PRIVILEGES;
- 展示主机中的二进制日志信息
SHOW MASTER STATUS;
# 记录此时展示File文件名和Position,后面从机需要通过读取此文件来实现主从同步
# Position指的是文件起始点
- docker中的从机连接主机
# 登录从机
mysql -uroot -pmysql -h 127.0.0.1 --port=3307
# 从机连接到主机
change master to master_host='127.0.0.1', master_user='slave', master_password='slave', master_log_file='mysql-bin.xxxxxx', master_log_pos=9900200;
# 开启从机服务
start slave;
# 展示从机服务状态
show slave status \G
# 测试主从同步是否成功
# 在主机中新建一个数据库,看从机是否存在
4.Django实现Mysql读写分离
- 增加slave数据库配置
DATABASES = {
'default': { # 写(主机)
'ENGINE': 'django.db.backends.mysql', # 数据库引擎
'HOST': '192.168.103.158', # 数据库主机
'PORT': 3306, # 数据库端口
'USER': 'itcast', # 数据库用户名
'PASSWORD': '123456', # 数据库用户密码
'NAME': 'meiduo_mall' # 数据库名字
},
'slave': { # 读(从机)
'ENGINE': 'django.db.backends.mysql',
'HOST': '192.168.103.158',
'PORT': 8306,
'USER': 'root',
'PASSWORD': 'mysql',
'NAME': 'meiduo_mall'
}
}
- 创建和配置数据库读写路由
在工程utils目录中创建db_router.py文件
class MasterSlaveDBRouter(object):
"""数据库读写路由"""
def db_for_read(self, model, **hints):
"""读"""
return "slave"
def db_for_write(self, model, **hints):
"""写"""
return "default"
def allow_relation(self, obj1, obj2, **hints):
"""是否运行关联操作"""
return True
- 配置数据库读写路由
DATABASE_ROUTERS = ['meiduo_mall.utils.db_router.MasterSlaveDBRouter']