Mysql主从复制及读写分离设计

Mysql主从复制

背景：

MySQL作为世界上使用最为广泛的数据库之一，免费是其原因之一；但不可忽略的是它本身的功能的确很强大。随着技术的发展，在实际的生产环境中，由单台MySQL数据库服务器不能满足实际的需求。此时数据库集群就很好的解决了这个问题了。采用MySQL分布式集群，能够搭建一个高并发、负载均衡的集群服务器。在此之前我们必须要保证每台MySQL服务器里的数据同步

原理：

MySQL主从复制是一个异步的复制过程,底层是基于Mysql数据库自带的二进制日志功能。就是一台或多台MySQL数据
库(slave,即从库)从另一台MySQL数据库(master,即主库)进行日志的复制然后再解析日志并应用到自身,最
终实现从库的数据和主库的数据保持一致。MySQL主从复制是MySQL数据库自带功能,无需借助第三方工具。

 MySQL复制过程分成三步:

• master将改变记录到二进制日志(binary log)
• slave将master的binary log拷贝到它的中继日志(relay log)
• slave重做中继日志中的事件,将改变应用到自己的数据库中
• 

 

 

实验操作

配置-前置条件

提前准备好两台服务器 ,分别安装Mysq1并启动服务成功

• 主库Master 192.168.138.100
• 从库Slave 192.168.138.101

（红色为自定义）

配置-主库Master

第一步:修改Mysql数据库的配置文件/etc/my.cnf

[mysqld]
log-bin=mysql-bin                      #[必须]启用二进制日志

server-id=100                            #[必须]服务器唯一ID（红色为不固定，自定义）

 

第二步:重启Mysq1服务

systemctl  restart  mysqld

第三步:登录Mysql数据库,执行下面SQL
GRANT REPLICATION SLAVE ON *.* to 'xiaoming'@'%' identified by 'Root@123456';

注:上面SQL的作用是创建一个用户xiaoming,密码为Root@123456,并且给xiaoming用户授予REPLICATION SLAVE
权限。常用于建立复制时所需要用到的用户权限,也就是slave必须被master授权具有该权限的用户,才能通过该用户复制。

第四步:登录Mysql数据库,执行下面SQL,记录下结果中File和Position的值

show master status;

 注:上面SQL的作用是查看Master的状态,执行完此SQL后不要再执行任何操作

配置-从库Slave
第一步:修改Mysq1数据库的配置文件/etc/my.cnf

[mysqld]
server-id=101            #[必须]服务器唯一ID（红色为不固定，自定义）

第二步:重启Mysq1服务

systemctl  restart  mysqld

第三步:登录Mysql数据库,执行下面SQL
change master to master_host='192.168.138.100',master_user='xiaoming' , master_password='Root@123456',master_log_file='mysql-bin.000001',master_log_pos=439;

（红色字体的要根据master状态里file和position填写）

start slave；      #开启线程

 第四步:登录Mysq1数据库,执行下面SQL,查看从数据库的状态
show slave status;

 

读写分离

背景

面对日益增加的系统访问量,数据库的吞吐量面临着巨大瓶颈。对于同一时刻有大量并发读操作和较少写操作类型的应用系统来说,将数据库拆分为主库和从库,主库负责处理事务性的增删改操作,从库负责处理查询操作,能够有效的避免由数据更新导致的行锁,使得整个系统的查询性能得到极大的改善。

 

Sharding-JDBC介绍

Sharding-JDBC定位为轻量级Java框架,在Java的JDBC层提供的额外服务。它使用客户端直连数据库,以jar包形式
提供服务,无需额外部署和依赖,可理解为增强版的JDBC驱动,完全兼容JDBC和各种ORM框架。
使用Sharding-JDBC可以在程序中轻松的实现数据库读写分离。

• 适用于任何基于JDBC的ORM框架,如:JPA,Hibernate,Mybatis,Spring JDBC Template或直接使用JDBC。
• 支持任何第三方的数据库连接池,如:DBCP,C3P0,BoneCP,Druid,HikariCP等。

支持任意实现JDBC规范的数据库。目前支持MySQL,Oracle,SQLServer,PostgreSQL以及任何遵循SQL92标准的数据库。

<dependency>
<groupId>org. apache. shardingsphere</groupId>
<artifactId>sharding-jdbc-spring-boot-starter</artifactId>
<version>4.0.0-RC1</version>
</dependency>

入门案例

使用Sharding-JDBC实现读写分离步骤:

1. 导入maven坐标
2. 在配置文件中配置读写分离规则

   spring:
   shardingsphere:
   datasource:
   names :
   master, slave，slave1
   # 主数据源
   master:
   type: com.alibaba.druid.pool. DruidDataSource
   driver-class-name: com.mysql.cj.jdbc.Driver
   url: jdbc:mysql://192.168.138.100:3306/rw?characterEncoding=utf-8
   username: root
   password: root
   # 从数据源（可多个）
   slave:
   type: com.alibaba.druid.pool. DruidDataSource
   driver-class-name: com.mysql.cj.jdbc.Driver
   url: jdbc:mysql://192.168.138.101:3306/rw?characterEncoding=utf-8
   username: root
   password: root
   # 从数据源（可多个）
   slave2:
   type: com.alibaba.druid.pool. DruidDataSource
   driver-class-name: com.mysql.cj.jdbc.Driver
   url: jdbc:mysql://192.168.138.101:3306/rw?characterEncoding=utf-8
   username: root
   password: root
   masterslave:
   #读写分离配置
   load-balance-algorithm-type: round_robin #从库负载均衡，轮询
   #最终的数据源名称
   name: dataSource
   # 主库数据源名称
   master-data-source-name: master
   # 从库数据源名称列表,多个逗号分隔
   slave-data-source-names: slave，slave1
   props:
   sql:
   show: true #开启SOL显示,默认false

3. 在配置文件中配置允许bean定义覆盖配置项（原因：项目中某几个框架的配置类中都要创建dataSource数据对象，导致冲突）

main:

allow-bean-definition-overriding: true