mysql数据库集群---慢查询、MySQL路由器配置、 MHA

最新推荐文章于 2023-04-04 21:30:39 发布
最新推荐文章于 2023-04-04 21:30:39 发布
阅读量238 收藏
点赞数
分类专栏： Linux企业级 文章标签： 数据库 mysql
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_51140575/article/details/115589251
版权

慢查询

[root@server1 ~]# /etc/init.d/mysqld start 
[root@server1 ~]# mysql -pwestos
mysql> show variables like 'slow%';
mysql> set global slow_query_log=ON;

在这里插入图片描述

[root@server1 ~]# cd /usr/local/mysql/data/
[root@server1 ~]# cat server1-slow.log

在这里插入图片描述

[root@server1 data]# mysql -pwestos
mysql> show variables like 'long%';
mysql> select sleep(10);

在这里插入图片描述

[root@server1 data]# cat server1-slow.log

在这里插入图片描述

MySQL路由器配置

server1重新引导

[root@server1 ~]# /etc/init.d/mysqld start 
[root@server1 ~]# mysql -pwestos
mysql> SELECT * FROM performance_schema.replication_group_members;

在这里插入图片描述

mysql> STOP GROUP_REPLICATION;
mysql> SET GLOBAL group_replication_bootstrap_group=ON;
mysql> START GROUP_REPLICATION;
mysql> SET GLOBAL group_replication_bootstrap_group=OFF;
mysql> SELECT * FROM performance_schema.replication_group_members;

在这里插入图片描述
sever2、3加入

[root@server2 ~]# /etc/init.d/mysqld start
[root@server2 ~]# mysql -p
mysql> START GROUP_REPLICATION;

[root@server3 ~]# /etc/init.d/mysqld start
[root@server3 ~]# mysql -pwestos
mysql> START GROUP_REPLICATION;

server1查看

[root@server1 ~]# mysql -pwestos
mysql> SELECT * FROM performance_schema.replication_group_members;

在这里插入图片描述
server4

需要的包
在这里插入图片描述

[root@server4 ~]# rpm -ivh mysql-router-community-8.0.21-1.el7.x86_64.rpm 
[root@server4 ~]# vim /etc/mysqlrouter/mysqlrouter.conf

在这里插入图片描述
启动服务

[root@server4 ~]# systemctl start mysqlrouter.service 
[root@server4 mysqlrouter]# netstat -antlp

在这里插入图片描述
server1授权

[root@server1 ~]# mysql -pwestos
mysql> grant select on *.* to user1@'%' identified by 'westos';
mysql> grant all on test.* to user2@'%' identified by 'westos';
mysql> flush privileges;

宿主机测试

[root@server1 ~]# mysql -pwestos
[root@foundation4 ~]# mysql -h 172.25.4.4  -P 7001 -u user1 -pwestos
mysql> select * from test.t1;

在这里插入图片描述

[root@foundation4 ~]# mysql -h 172.25.4.4  -P 7001 -u user2 -pwestos
mysql> show databases;
mysql> use test
mysql> insert into t1 values (6,'redhat');
mysql> select * from t1;

在这里插入图片描述
在这里插入图片描述

实现负载均衡

server1、2、3安装lsof

[root@server1 ~]# yum install lsof -y
[root@server2 ~]# yum install lsof -y
[root@server3 ~]# yum install lsof -y

在宿主机端退出重进数据库

[root@foundation4 ~]# mysql -h 172.25.4.4  -P 7001 -u user1 -pwestos

server1上查询、此时server2、3查询不到

[root@server1 ~]# lsof -i :3306

在这里插入图片描述
在宿主机端退出重进数据库
server2上查询、此时server1、3查询不到
在这里插入图片描述
在宿主机端退出重进数据库
server3上查询、此时server1、2查询不到
在这里插入图片描述

MHA高可用

server1

[root@server1 ~]# /etc/init.d/mysqld stop
[root@server1 ~]# rm -rf /usr/local/mysql/data/*
[root@server1 ~]# vim /etc/my.cnf
[mysqld]
datadir=/usr/local/mysql/data
socket=/usr/local/mysql/data/mysql.sock
symbolic-links=0

server_id=1
gtid_mode=ON
enforce_gtid_consistency=ON
master_info_repository=TABLE
relay_log_info_repository=TABLE
log_slave_updates=ON
log_bin=binlog
binlog_format=ROW

在这里插入图片描述

[root@server1 ~]# mysqld --initialize --user=mysql

在这里插入图片描述

[root@server1 ~]# /etc/init.d/mysqld start
[root@server1 ~]# mysql_secure_installation

在这里插入图片描述
在这里插入图片描述

[root@server1 ~]# mysql -pwestos
mysql> grant replication slave on *.* to repl@'%' identified by 'westos';
mysql> alter user root@'%' identified by 'westos';
mysql> flush privileges;

server2

[root@server2 ~]# /etc/init.d/mysqld stop
[root@server2 ~]# rm -rf /usr/local/mysql/data/*
[root@server2 ~]# vim /etc/my.cnf
[mysqld]
datadir=/usr/local/mysql/data
socket=/usr/local/mysql/data/mysql.sock
symbolic-links=0

server_id=2
gtid_mode=ON
enforce_gtid_consistency=ON
master_info_repository=TABLE
relay_log_info_repository=TABLE
log_slave_updates=ON
log_bin=binlog
binlog_format=ROW

在这里插入图片描述
做初始化

[root@server2 ~]# mysqld --initialize --user=mysql
[root@server2 ~]# /etc/init.d/mysqld start
[root@server2 ~]# mysql_secure_installation

[root@server2 ~]# mysql -pwestos
mysql> CHANGE MASTER TO MASTER_HOST='172.25.4.1', MASTER_USER='repl', MASTER_PASSWORD='westos', MASTER_AUTO_POSITION=1;
mysql> start slave;
mysql> show slave status\G;

在这里插入图片描述
server3

[root@server3 ~]# /etc/init.d/mysqld stop
[root@server3 ~]# rm -rf /usr/local/mysql/data/*
[root@server3 ~]# vim /etc/my.cnf
[mysqld]
datadir=/usr/local/mysql/data
socket=/usr/local/mysql/data/mysql.sock
symbolic-links=0

server_id=3
gtid_mode=ON
enforce_gtid_consistency=ON
master_info_repository=TABLE
relay_log_info_repository=TABLE
log_slave_updates=ON
log_bin=binlog
binlog_format=ROW

在这里插入图片描述

做初始化

[root@server3 ~]# mysqld --initialize --user=mysql
[root@server3 ~]# /etc/init.d/mysqld start
[root@server3 ~]# mysql_secure_installation 

[root@server3 ~]# mysql -pwestos
mysql> CHANGE MASTER TO MASTER_HOST='172.25.4.1', MASTER_USER='repl', MASTER_PASSWORD='westos', MASTER_AUTO_POSITION=1;
mysql> start slave;
mysql> show slave status\G;

在这里插入图片描述
server4

[root@server4 ~]# systemctl stop mysqlrouter.service

需要的包和依赖
在这里插入图片描述

[root@server4 MHA-7]# yum install *.rpm -y

将node包传给server1、2、3并安装

[root@server4 MHA-7]# scp mha4mysql-node-0.58-0.el7.centos.noarch.rpm server1:
[root@server4 MHA-7]# scp mha4mysql-node-0.58-0.el7.centos.noarch.rpm server2:
[root@server4 MHA-7]# scp mha4mysql-node-0.58-0.el7.centos.noarch.rpm server3:
[root@server1 ~]#  yum install -y mha4mysql-node-0.58-0.el7.centos.noarch.rpm
[root@server2 ~]#  yum install -y mha4mysql-node-0.58-0.el7.centos.noarch.rpm
[root@server3 ~]#  yum install -y mha4mysql-node-0.58-0.el7.centos.noarch.rpm

[root@server4 ~]# mkdir /etc/masterha
[root@server4 ~]# cd /etc/masterha
[root@server4 masterha]# vim app.cnf
[server default]
user=root
password=westos
ssh_user=root
repl_user=repl
repl_password=westos
master_binlog_dir= /usr/local/mysql/data
remote_workdir=/tmp
secondary_check_script= masterha_secondary_check -s 172.25.4.1 -s 172.25.4.2
ping_interval=3
# master_ip_failover_script= /script/masterha/master_ip_failover
# shutdown_script= /script/masterha/power_manager
# report_script= /script/masterha/send_report
# master_ip_online_change_script= /script/masterha/master_ip_online_change
manager_workdir=/etc/masterha/app1
manager_log=/etc/masterha/app1/manager.log

[server1]
hostname=172.25.4.1

[server2]
hostname=172.25.4.2
candidate_master=1

[server3]
hostname=172.25.4.3
no_master=1

在这里插入图片描述

[root@server4 masterha]# mkdir app1
[root@server4 ~]# ssh-keygen

在这里插入图片描述
免密

[root@server4 ~]# ssh-copy-id server1
[root@server4 ~]# ssh-copy-id server2
[root@server4 ~]# ssh-copy-id server3
[root@server4 ~]# scp -r .ssh/ server1:
[root@server4 ~]# scp -r .ssh/ server2:
[root@server4 ~]# scp -r .ssh/ server3:

检测

[root@server4 ~]# masterha_check_ssh --conf=/etc/masterha/app.cnf

在这里插入图片描述

[root@server4 ~]# masterha_check_repl --conf=/etc/masterha/app.cnf

在这里插入图片描述

master切换

手动切换

MHA的故障切换过程，共包括以下的步骤：

1.配置文件检查阶段，这个阶段会检查整个集群配置文件配置

2.宕机的master处理，这个阶段包括虚拟ip摘除操作，主机关机操作

3.复制dead maste和最新slave相差的relay log，并保存到MHA Manger具体的目录下

4.识别含有最新更新的slave

5.应用从master保存的二进制日志事件（binlog events）

6.提升一个slave为新的master进行复制

7.使其他的slave连接新的master进行复制

master切换到server2

[root@server4 ~]# masterha_master_switch --conf=/etc/masterha/app.cnf --master_state=alive --new_master_host=172.25.4.2 --new_master_port=3306 --orig_master_is_new_slave --running_updates_limit=10000

全输入yes
在这里插入图片描述
在这里插入图片描述

server1、3查看，master已经切换
在这里插入图片描述
停止server2，将master切换回server1

[root@server1 ~]# /etc/init.d/mysqld stop
[root@server4 ~]# masterha_master_switch --master_state=dead --conf=/etc/masterha/app.cnf --dead_master_host=172.25.4.2 --dead_master_port=3306 --new_master_host=172.25.4.1 --new_master_port=3306 --ignore_last_failover

开启server2

[root@server2 ~]# mysql -pwestos
mysql> CHANGE MASTER TO MASTER_HOST='172.25.4.1', MASTER_USER='repl', MASTER_PASSWORD='westos', MASTER_AUTO_POSITION=1;
mysql> start slave;
mysql> show slave status\G;

切换成功
在这里插入图片描述
生成文件
在这里插入图片描述

自动切换

MHA在线切换的大概过程：
1.检测复制设置和确定当前主服务器
2.确定新的主服务器
3.阻塞写入到当前主服务器
4.等待所有从服务器赶上复制
5.授予写入到新的主服务器
6.重新设置从服务器

为了保证数据完全一致性，在最快的时间内完成切换，MHA的在线切换必须满足以下条件才会切换成功，否则会切换失败。
1.所有slave的IO线程都在运行
2.所有slave的SQL线程都在运行
3.所有的show slave status的输出中Seconds_Behind_Master参数小于或者等于running_updates_limit秒，如果在切换过程中不指定running_updates_limit,那么默认情况下running_updates_limit为1秒。
4.在master端，通过show processlist输出，没有一个更新花费的时间大于running_updates_limit秒。

[root@server4 app1]# rm -rf app.failover.complete 
[root@server4 app1]# masterha_manager --conf=/etc/masterha/app.cnf &

[root@server1 ~]# /etc/init.d/mysqld stop

在这里插入图片描述

[root@server1 ~]# /etc/init.d/mysqld start

[root@server1 ~]# mysql -pwestos
mysql> CHANGE MASTER TO MASTER_HOST='172.25.4.2', MASTER_USER='repl', MASTER_PASSWORD='westos', MASTER_AUTO_POSITION=1;
mysql> start slave;
mysql> show slave status\G;

已切换到server2
在这里插入图片描述

[root@server4 app1]# rm -rf app.failover.complete

脚本切换

需要的文件

[root@server4 ~]# cd /usr/local/bin/
[root@server4 bin]# ls
[root@server4 bin]# chmod +x *

在这里插入图片描述

[root@server4 bin]# vim /etc/masterha/app.cnf

在这里插入图片描述

[root@server2 ~]# ip addr add 172.25.4.100/24 dev eth0

[root@foundation4 Desktop]# mysql -h 172.25.4.100 -u root -pwestos
mysql> show databases;

在这里插入图片描述

[root@server4 masterha]# masterha_master_switch --conf=/etc/masterha/app.cnf --master_state=alive --new_master_host=172.25.4.1 --new_master_port=3306 --orig_master_is_new_slave --running_updates_limit=10000

server3查看，master已经切换到server1
在这里插入图片描述
打入后台，关闭server1

[root@server4 masterha]# masterha_manager --conf=/etc/masterha/app.cnf &
[root@server1 ~]# /etc/init.d/mysqld stop

server3查看，master节点切换到server1
在这里插入图片描述
启动server1，加入server2

[root@server1 ~]# /etc/init.d/mysqld start
[root@server1 ~]# mysql -pwestos
mysql>  CHANGE MASTER TO MASTER_HOST='172.25.4.2', MASTER_USER='repl', MASTER_PASSWORD='westos', MASTER_AUTO_POSITION=1;
Query OK, 0 rows affected, 2 warnings (0.03 sec)
mysql> start slave;
mysql> show slave status\G;

在这里插入图片描述

bw-1111
关注
专栏目录
mysql多主模式配置、mysql路由、MHA高可用及主从切换
weixin_44743132的博客
12-20 1140
组复制必须保证三台数据库完全一致，否则会失败 server1\server2\server3三台主机进行多主复制，当其中一台down掉后，其余两台依旧可以正常同步数据 一、mysql多主模式配置 [root@server1 ~]# cd /data/mysql/ [root@server1 mysql]# ls auto.cnf ibdata1 mysql-bin.000003 private_key.pem ca-key.pem ib_log.
Linux企业运维——Mysql路由器+MHA高可用
joab6515的博客
09-20 308
一、mysql路由器配置 通过配置Mysql路由器来实现读写分离的效果，编写配置文件，能够实现读写调度到Mysql组复制集群中的不同后端 1.开启一个新的节点配置mysql路由器 [root@server4 ~]# rpm -ivh mysql-router-community-8.0.21-1.el7.x86_64.rpm %安装相关rpm安装包 [root@server4 ~]# cd /etc/mysqlrouter/ [root@server4 mysqlrouter]# ls mysqlr
MySQL 查询速度慢与性能差的原因与解决方法
01-21
一、什么影响了数据库查询速度 1.1 影响数据库查询速度的四个因素 1.2 风险分析 QPS： QueriesPerSecond意思是“每秒查询率”，是一台服务器每秒能够相应的查询次数，是对一个特定的查询服务器在规定时间内所处理流量多少的衡量标准。 TPS： 是 TransactionsPerSecond的缩写，也就是事务数/秒。它是软件测试结果的测量单位。客户机在发送请求时开始计时，收到服务器响应后结束计时，以此来计算使用的时间和完成的事务个数。 Tips： 最好不要在主库上数据库备份，大型活动前取消这样的计划。 效率低下的 sql：超高的 QPS与 TPS。大量的并发：数据连接数被占满（
mysql cluster 子查询速度很慢
野马
09-22 1971
      在整个mysql cluster 的测试过程当中，对于insert、update 、delete、groupby或order by等等都会执行的很快，远远超出单台机器的性能，可以说四台机器能够超过一台机器的4倍以上的速度。      可惜，我在测试过程当中，对于子查询，始终没有找到很好的处理方案。怀疑自己的处理是不是配置方案没有达到高效水平。另一方面，也怀疑系统的真实存在的问题
Mysql集群及高可用-慢查询7
Redhat_yan
08-24 318
Mysql集群及高可用-SQL线程的优化-慢查询7
mysql的慢查询、路由器配置、mha高可用
weixin_62615875的博客
12-17 562
目录 1.慢查询 2.路由器配置 3.mha高可用 介绍 MHA工作原理 MHA软件由两部分组成 实验前准备 4.mha高可用实验 手动切换 自动切换 1.慢查询 set global slow_query_log=ON; show variables like "long%"; set long_query_time=5; show status like 'slow%';select sleep(10) 等待了十秒 2.路由器配置 MySQL Router 是轻..
mysql配置慢查询日志/etc/my.cnf
飙歌的博客
10-26 320
[mysqld] datadir=/var/lib/mysql socket=/var/lib/mysql/mysql.sock user=mysql #Disabling symbolic-links is recommended to prevent assorted security risks symbolic-links=0 #开启慢查询日志记录 slow_query_log=1 #查询时间超过1秒的sql语句会被记录 long_query_time=0.9 #记录没有使用索引的查询 log_q
MySql数据库MHA高可用详细配置文档
09-07
MHA（Master High Availability）是一种用于MySQL集群的高可用性解决方案，它能够在主数据库发生故障时自动将从库提升为主，以最小化服务中断时间。本文将详细介绍MHA的配置步骤以及与之相关的MySQL主从复制和...
MySQL数据库高可用性的研究与实现.pdf
10-10
MHA（Master High Availability）是一种用Perl编写的解决方案，用于监控MySQL复制集群并在主服务器故障时快速切换。MHA通过一个manager节点管理多个复制对，能在10到30秒内完成切换，同时解决了在复制过程中保持数据...
企业运维--mysql多组复制和主从切换
m0_62885194的博客
12-16 1158
mysql多组复制： 组复制必须保证三台数据库完全一致，否则会失败 server1\server2\server3三台主机进行多组复制，当其中一台down掉后，其余两台依旧可以正常同步数据 server1： [root@server1 ~]# cd /data/mysql/ [root@server1 mysql]# rm -fr * ###删除初始mysql数据 [root@server1 mysql]# vim /etc/my.cnf ###编辑配置文件 ******.
MySQL高可用之MHA的实现及大规模运维实践
04-24
MySQL高可用之MHA的实现及大规模运维实践分享文档，很不错的，可作为参考
mycat 分表子查询_mysql分库分表之mycat中间件解决方案
weixin_39799565的博客
12-20 143
项目运营期间随着时间的推移线上环境的数据越来越多，线上的sql跑的越来越慢，当数据表增加的千万级别数据，单纯的增加索引已经不能解决线上的慢sql问题，这时，分表 ，分区，分库应运而生；小弟不才刚接触了分表，分库，现在分享下，有问题多多指教，见笑。1 mysql分表分为水平切分，和垂直切分垂直分割(并不常用)就是将一个表按照字段来分，每张表保证有相同的主键就好。一般来说，将常用字段和大字段分表来放。...
mysql mha sla_慢查询日志工具mysqlsla的使用
weixin_30063287的博客
01-27 126
安装mysqlsla源码路径：https://github.com/daniel-nichter/hackmysql.com源码存放路径：/usr/local/src1、获取源码如果没有git命令，请先安装gityum install gitcd/usr/local/srcgit clone https://github.com/daniel-nichter/hackmysql.com.gitcp...
Linux企业化运维--(6)Mysql之并行复制(MTS)、延迟复制、慢查询、组复制、路由器、MAH高可用主从切换
weixin_43849813的博客
09-25 461
Linux企业化运维 实验所用系统为Redhat-rhel7.6。 目录Linux企业化运维Linux企业化运维--(6)Mysql之并行复制(MTS)、延迟复制、慢查询、组复制、路由器一、并行复制（MTS） Linux企业化运维–(6)Mysql之并行复制(MTS)、延迟复制、慢查询、组复制、路由器 一、并行复制（MTS） 适用于多线程并发。此处实验接着上一部实验半同步的。 在server1主机中修改配置文件，设定在mysql中创建表，数据会存在数据库中，打开半同步复制。 vim /etc/my.cnf
CentOS7.8-MySQL-MHA高可用部署搭建
最新发布
weixin_73705067的博客
04-04 1275
目录Msyql MHA高可用MHA简介：MHA 优点：MHA 故障切换流程Manager工具：MHA搭建操作步骤：一、基础环境搭建1.1、将主机全部修改主机名&生成密钥1.2、man-manager修改host同步1.3、yum安装mysql 5.7版本1.44、优化MySQL（101、102、103都做）1.5、将下文导入my.cnf（101、102、103都做）1.6、mha-slave1二、开始配置主从复制2.1、mha-master2.2、mha-slave12.3、mha-slave22.4、mh
如何完成一次快速的查询 - 从MySQL到分库分表到ES和HBASE
liyifan687的博客
04-19 1340
哪个男孩不想完成一次快速的查询？ 1. MySQL 查询慢是什么体验？ 谢邀，利益相关。 大多数互联网应用场景都是读多写少，业务逻辑更多分布在写上。对读的要求大概就是要快。那么都有什么原因会导致我们完成一次出色的慢查询呢？ 1.1 索引 在数据量不是很大时，大多慢查询可以用索引解决，大多慢查询也因为索引不合理而产生。 MySQL 索引基于 B+ 树，这句话相信面试都背烂了，接着就可以问最左前缀索引...
mysql集群 生产环境_Percona Mysql Galera多读写集群部署生产环境实记
weixin_39614874的博客
01-19 464
Percona Mysql Galera多读写集群部署生产环境实记一、部署MySQL：yum install https://www.percona.com/redir/downloads/percona-release/redhat/latest/percona-release-0.1-6.noarch.rpm -y 安装percona的仓库文件。yum install Percona-Xtr...
一次900万+数据量的 SQL 查询优化分析
Java后端技术
01-26 736
祝大家新年快乐，在新的一年里，工作顺利，身体健康，万事如意！另外，最近大家没有特别重要的事情不要出门了，尽量在家呆着，减少与他人接触，出门一定记得带有防护作用的口罩，注意安全！保护好自己...
MHA-Mysql离线安装教程：配置与步骤详解
Mysql-MHA 是一个用于高可用性和故障切换的 MySQL 集群解决方案，特别适用于分布式环境中的主从复制架构。离线安装MHA通常涉及到以下几个关键步骤： 1. **安装包获取**： MHA相关的软件包包括 `mha4mysql-node` 和...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值