MySQL数据库《2》：MySQL主从配置和集群配置

docker实现数据库主从配置

一、原理讲解

1. 主从同步意义？

​ 主从同步使得数据可以从一个数据库服务器复制到其他服务器上，在复制数据时，一个服务器充当主服务器（master），其余的服务器充当从服务器（slave）。因为复制是异步进行的，所以从服务器不需要一直连接着主服务器，从服务器甚至可以通过拨号断断续续地连接主服务器。通过配置文件，可以指定复制所有的数据库，某个数据库，甚至是某个数据库上的某个表。

2. 使用主从的好处

1. ​ 通过增加从服务器来提高数据库的性能，在主服务器上执行写入和更新，在从服务器上向外提供读功能，可以动态地调整从服务器的数量，从而调整整个数据库的性能。
2. 提高数据安全，因为数据已复制到从服务器，从服务器可以终止复制进程，所以，可以在从服务器上备份而不破坏主服务器相应数据
3. 在主服务器上生成实时数据，而在从服务器上分析这些数据，从而提高主服务器的性能

3. 机制

1. Mysql服务器之间的主从同步是基于二进制日志机制，主服务器使用二进制日志来记录数据库的变动情况，从服务器通过读取和执行该日志文件来保持和主服务器的数据一致。
2. 在使用二进制日志时，主服务器的所有操作都会被记录下来，然后从服务器会接收到该日志的一个副本。从服务器可以指定执行该日志中的哪一类事件（譬如只插入数据或者只更新数据），默认会执行日志中的所有语句。

4. 配置主从同步的基本步骤

1. 在主服务器上，必须开启二进制日志机制和配置一个独立的ID
2. 在每一个从服务器上，配置一个唯一的ID，创建一个用来专门复制主服务器数据的账号
3. 在开始复制进程前，在主服务器上记录二进制文件的位置信息
4. 如果在开始复制之前，数据库中已经有数据，就必须先创建一个数据快照（可以使用mysqldump导出数据库，或者直接复制数据文件）
5. 配置从服务器要连接的主服务器的IP地址和登陆授权，二进制日志文件名和位置

二、配置

centos里面配置mysql为主服务器、docker中配置msyql为从服务器，一般是主写从读，会开启两条线程

1. 镜像拉取

# 从本地传递获取到mysql_docker.tar到阿里云/usr/local中
docker load -i mysql_docke.tar

运行mysql docker镜像，需要在宿主机中建立文件目录用于mysql容器保存数据和读取配置文件。

在家目录中（/home/python）中创建目录，将mysql的配置文件放到此目录中

cd ~
mkdir mysql_slave
cd mysql_slave
mkdir data
cp -r /etc/mysql/mysql.conf.d ./

# cp -r /etc/my.cnf ./
# cp -r /etc/my.cnf.d ./

我们要将docker运行的mysql作为slave来运行，开启前需要修改配置文件。

编辑 ~/mysql_slave/mysql.conf.d/mysqld.cnf 文件，修改

port  =  8306					# 端口 可以随意配置
general_log  = 0				# 不输出日志
server-id  = 2					# 设置从服务器id，必须唯一，可以为IP地址最后尾段数字

我们让此台mysql运行在8306端口上，且mysql编号为2

创建docker容器

-e 传入的环境变量参数

/home/pyvip/mysql_slave/data:/var/lib/mysql 把mysql默认存储数据文档目录映射到data里面

/home/pyvip/mysql_slave/mysql.conf.d:/etc/mysql/mysql.conf.d 把配置文件映射进去

docker run --name mysql-slave -e MYSQL_ROOT_PASSWORD=mysql -d --network=host -v /home/pyvip/mysql_slave/data:/var/lib/mysql -v /home/pyvip/mysql_slave/mysql.conf.d:/etc/mysql/mysql.conf.d  mysql:5.7.22


docker run --name msyql-slave -e MYSQL_ROOT_PASSWORD=hx120841 -d --network=host -v /usr/local/msyql_slave/data:/var/lib/mysql -v /usr/local/mysql_slave/my.cnf:/etc/mysql/my.cnf mysql:5.7.22

测试，在ubuntu中使用mysql命令尝试连接docker容器中的mysql

mysql -uroot -pmysql -h 127.0.0.1 --port=8306

2 . 备份主服务器原有数据到从服务器

mysqldump -uroot -pqwe123 --all-databases --lock-all-tables > ~/master_db.sql

mysqldump -uroot -pqwe123 --opt bb  --lock-all-tables > ~/master_db.sql    #  导出单个表

1. –all-databases ：导出所有数据
2. –lock-all-tables ：执行操作时锁住所有表，防止操作时有数据修改
3. ~/master_db.sql :导出的备份数据（sql文件）位置，可自己指定

3. 在docker容器中导入数据

mysql -uroot -pmysql -h127.0.0.1 --port=8306 < ~/master_db.sql

登入主服务器Ubuntu中的mysql，创建用于从服务器同步数据使用的帐号

mysql –uroot –pqwe123

GRANT REPLICATION SLAVE ON *.* TO 'slave'@'%' identified by 'slave';

FLUSH PRIVILEGES;

4. 获取主服务器的二进制日志信息

SHOW MASTER STATUS;

File为使用的日志文件名字，Position为使用的文件位置，这两个参数须记下，配置从服务器时会用到。

5. 配置从服务器slave （docker中的mysql）

进入docker中的mysql

mysql -uroot -pmysql -h 127.0.0.1 --port=8306

change master to master_host='127.0.0.1', master_user='slave', master_password='slave',master_log_file='mysql-bin.000006', master_log_pos=590;

• master_host：主服务器Ubuntu的ip地址
• master_log_file: 前面查询到的主服务器日志文件名
• master_log_pos: 前面查询到的主服务器日志文件位置

6. 启动slave服务器，并查看同步状态

start slave;
show slave status \G

三、MySQL集群

1. 为什么要使用数据集群和负载均衡

1. 高可用性
2. 高并发性
3. 高性能

2. mysql数据库集群方式

3. 使用docker 安装PXC

1. 拉取PXC镜像

   docker pull percona/percona-xtradb-cluster
   

2. 创建volume数据卷

   docker volume create --name v1
   docker volume create --name v2
   docker volume create --name v3
   
   # 查看是否有volume
   docker volume inspect
   
   # 查看数据卷v1的信息
   docker volume inspect v1
   

3. 创建network网络

   docker network create --subnet=172.18.0.0/24 net1
   

4. 运行PXC容器

   # 创建node1容器
   docker run -d -p 8003:3306 -v v1:/var/lib/mysql -e MYSQL_ROOT_PASSWORD=hx120841 -e XTRABACKUP_PASSWORD=hx120841 -e CLUSTER_NAME=PXC --name=node1 --net=net1 --ip 172.18.0.2 percona/percona-xtradb-cluster
   
   # 创建node2容器
   docker run -d -p 8004:3306 -v v2:/var/lib/mysql -e MYSQL_ROOT_PASSWORD=hx120841 -e XTRABACKUP_PASSWORD=hx120841 -e CLUSTER_NAME=PXC -e CLUSTER_JOIN=node1 --name=node2 --net=net1 --ip 172.18.0.3 percona/percona-xtradb-cluster
   
   # 创建node3容器
   docker run -d -p 8005:3306 -v v3:/var/lib/mysql -e MYSQL_ROOT_PASSWORD=hx120841 -e XTRABACKUP_PASSWORD=hx120841 -e CLUSTER_NAME=PXC -e CLUSTER_JOIN=node1 --name=node3 --net=net1 --ip 172.18.0.4 percona/percona-xtradb-cluster
   
   docker container ps -a  # 查看有哪些容器运行起来了
   
   # 真实的环境是这三个环境放在不同的服务器上面
   在navicate上面的端口为800X 转发后的端口
   

5. 使用Haproxy?

1. 高性能
2. 使用docker安装Haproxy
3. 使用Navicat登录Haproxy

负载均衡;先在docker里面创建集群网络，然后再创建mysql集群，然后再创建Haproxy集群