mysql多机优化

最新推荐文章于 2024-06-02 07:06:43 发布

laoxuQAQ

最新推荐文章于 2024-06-02 07:06:43 发布

阅读量122

点赞数

文章标签： mysql

本文链接：https://blog.csdn.net/laoxuQAQ/article/details/103758761

版权

主要的优化方案

sharding-sphere：jar，前身是sharding-jdbc；
当当网开源框架，文档丰富，使用成本低。
TDDL：jar，Taobao Distribute Data Layer；
淘宝业务框架，TDDL复杂度相对较高。当前公布的文档较少，只开源动态数据源，分表分库部分还未开源，还需要依赖diamond，不推荐使用。
Mycat：中间件。
第三方应用，考虑中间件备份与集群
Mysql-proxy(基本淘汰)
mysql-proxy是官方提供的mysql中间件产品可以实现负载平衡，读写分离，failover等，但其不
支持大数据量的分库分表且性能较差。

主从同步
1、为什么需要读写分离？
　　对数据库进行增删改操作时，需要对这些操作进行事务管理，因此当这些操作和查询操作混合使用，且在高并发的情况下时，会严重的降低查询效率。
2、主从同步操作流程简介
　 (1) master(主人)将改变记录到二进制日志(binary log)中（这些记录叫做二进制日志事件，binary log events）；

  (2) slave会一直开着一个I/O线程监视binary log；当该日志发生改变， slave(奴隶)将master的binary log events拷贝到它的中继日志(relay log)；

  (3)slave会一直开着一个SQL线程监视中继日志，当该日志发生改变， slave重做中继日志中的事件，将更改应用到自己的数据上。

把读的请求同步到从，把写的请求分发的主。(读写分离) 技术选型，myproxy

在一台电脑安装主从数据库服务器
1、准备主、从数据库

2、修改my.ini文件配置

将原数据库里面的c盘中的mysql文件夹替换新建的主、从数据（因为我们新建数据库服务器会自带一个mysql服务器，里面带有user信息，由于我们是拷贝的数据库所以要进行这一步操作）

my.ini文件修改参数

3、安装master数据库
安装
mysqld --install master --defaults-file=“D:\sharding\master\my.ini”
启动
net start master

net stop master 关闭服务
Sc delete master/slave 弄错了可以删除服务重新操作
查看日志目录，并开启sql语句的日志：

mysql>show variables like ‘%general_log%’;
mysql>set global general_log=on;
开启后，重启Mysql ，上述开启日志配置将失效。

主、从数据库配置完成就让他们发生关系
主数据库需要配置记录操作的二进制文件
主、从数据库需要一个中间用户，这个用户在master和slave都可以操作，以便发生关系
1、master服务器配置
1)修改master方的mysql.ini
log-bin=mysql-bin 存放二进制文件
server-id=1 服务唯一标识 id随意改

2)重启master服务，登录
3）slave my.ini文件配置

2、授权savle服务器的使用的账号及权限
语法为：GRANT REPLICATION SLAVE ON . to ‘用户名’@‘192.168.0.102’ identified
by ‘密码’;
Mysql> GRANT REPLICATION SLAVE ON . to ‘yhptest’@'192.168.77.128’identified
by ‘admin’;

laoxu 用户名 admin 密码
3、在slave端，配置master链接信息 (执行语句)

最后start slave 重启连接
show slave status 查看状态
注意在slave端的参数一一对应
其中Slave_IO_Running 与 Slave_SQL_Running 的值都必须为YES，才表明状态正

读写分离

application-rw.properties加上主从数据库的配置
spring.devtools.remote.restart.enabled=false
sharding.jdbc.datasource.names=ds0,ds1

sharding.jdbc.datasource.ds0.type=org.apache.commons.dbcp.BasicDataSource
sharding.jdbc.datasource.ds0.driver-class-name=com.mysql.jdbc.Driver
sharding.jdbc.datasource.ds0.url=jdbc:mysql://127.0.0.1:3307/shardtest1?serverTimezone=UTC
sharding.jdbc.datasource.ds0.username=root
sharding.jdbc.datasource.ds0.password=123456

sharding.jdbc.datasource.ds1.type=org.apache.commons.dbcp.BasicDataSource
sharding.jdbc.datasource.ds1.driver-class-name=com.mysql.jdbc.Driver
sharding.jdbc.datasource.ds1.url=jdbc:mysql://127.0.0.1:3308/shardtest1?serverTimezone=UTC
sharding.jdbc.datasource.ds1.username=root
sharding.jdbc.datasource.ds1.password=123456

#配置主从策略
#负载均衡策略随机和轮询
sharding.jdbc.config.masterslave.load-balance-algorithm-type=random
sharding.jdbc.config.masterslave.name=db1s1
sharding.jdbc.config.masterslave.master-data-source-name=ds0
sharding.jdbc.config.masterslave.slave-data-source-names=ds1

开启SQL显示，默认值: false，注意：仅配置读写分离时不会打印日志！！

sharding.jdbc.config.sharding.props.show=true
更多配置：
https://blog.csdn.net/chuopai1101/article/details/100767411

分表分库
properties配置文件
mybatis.type-aliases-package=cn.terry.sharddemo.mapper
mybatis.mapper-locations=classpath:mybatis/*.xml
#spring.profiles.active=rw

#datasource
spring.devtools.remote.restart.enabled=false

sharding.jdbc.datasource.names=ds0,ds1

sharding.jdbc.datasource.ds0.type=org.apache.commons.dbcp.BasicDataSource
sharding.jdbc.datasource.ds0.driver-class-name=com.mysql.jdbc.Driver
sharding.jdbc.datasource.ds0.url=jdbc:mysql://127.0.0.1:3307/crm?serverTimezone=UTC
sharding.jdbc.datasource.ds0.username=root
sharding.jdbc.datasource.ds0.password=123456

sharding.jdbc.datasource.ds1.type=org.apache.commons.dbcp.BasicDataSource
sharding.jdbc.datasource.ds1.driver-class-name=com.mysql.jdbc.Driver
sharding.jdbc.datasource.ds1.url=jdbc:mysql://127.0.0.1:3308/crm?serverTimezone=UTC
sharding.jdbc.datasource.ds1.username=root
sharding.jdbc.datasource.ds1.password=123456

##分库策略根据user_id
sharding.jdbc.config.sharding.default-database-strategy.inline.sharding-column=user_id
##对user_id取模确定数据所在数据库偶数id在一个库奇数id在一个库
sharding.jdbc.config.sharding.default-database-strategy.inline.algorithm-expression=ds$->{user_id % 2}

##分表策略
sharding.jdbc.config.sharding.tables.t_order.actual-data-nodes=ds $KaTeX parse error: Expected group after '_' at position 17: …>{0..1}.t_order_̲$ ->{0…1}
sharding.jdbc.config.sharding.tables.t_order.table-strategy.inline.sharding-column=order_id
##对订单号进行hash运算确定数据所在表名
sharding.jdbc.config.sharding.tables.t_order.table-strategy.inline.algorithm-expression=t_order_$->{order_id % 2}
sharding.jdbc.config.sharding.tables.t_order.key-generator-column-name=order_id
pom配置

org.springframework.boot
spring-boot-starter-web

org.mybatis.spring.boot
mybatis-spring-boot-starter
2.0.1

mysql mysql-connector-java 5.1.46 org.springframework.boot spring-boot-starter-test test org.springframework.boot spring-boot-devtools true org.projectlombok lombok commons-dbcp commons-dbcp 1.4 io.shardingsphere sharding-jdbc-spring-boot-starter 3.0.0.M1 .Mysql使用小技巧忘记密码 1、停掉mysql服务 2、在mysql.ini下，添加“skip-grant-tables”配置（mysqld这样可以去掉登录时的密码验证） 3、重启mysql 4、在cmd下输入mysql -uroot -P3306 ，无密码登录 5、use mysql; 6、set password=password（‘123’） --error update user set password=password('admin') where user='root' and host='localhost'; 7、重启，或直接flush privileges;