Mysql ProxySQL的学习

于 2022-07-30 15:43:32 发布
阅读量618 收藏 1
点赞数
文章标签： mysql 学习 linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u010648194/article/details/126072975
版权

192.168.88.129 安装proxysql

192.168.88.130 mysql主库

192.168.88.131 mysql从库

192.168.88.132 mysql从库

一、环境搭建

1、 下载安装

下载 wget https://github.com/sysown/proxysql/releases/download/v2.0.8/proxysql-2.0.8-1-centos7.x86_64.rpm

 yum localinstall proxysql-2.0.8-1-centos7.x86_64.rpm 

##查看安装的路径
rpm -ql proxysql

启动proxysql
systemctl start proxysql

 2、proxysql操作

proxysql有两个端口号
6032是ProxySQL的管理端口号， ProxySQL的用户名和密码都是默认的 admin
6033是对外服务的端口号

###连接proxysql的管理后端
mysql -uadmin -padmin -h 127.0.0.1 -P 6032
###proxysql的命令行跟mysql差不多
(admin@127.0.0.1) [(none)]> show databases;
+-----+---------------+-------------------------------------+
| seq | name          | file                                |
+-----+---------------+-------------------------------------+
| 0   | main          |                                     |
| 2   | disk          | /var/lib/proxysql/proxysql.db       |
| 3   | stats         |                                     |
| 4   | monitor       |                                     |
| 5   | stats_history | /var/lib/proxysql/proxysql_stats.db |
+-----+---------------+-------------------------------------+

    main: 内存配置数据库，即 MEMORY，表里存放后端 db 实例、用户验证、路由规则等信息
    disk ：持久化的磁盘的配置 
    stats： 统计信息的汇总  
    monitor：一些监控的收集信息，比如数据库的健康状态等 
    stats_history: 这个库是 ProxySQL 收集的有关其内部功能的历史指标

    注： 表名以 runtime_开头的表示 ProxySQL 当前运行的配置内容，不能通过 DML 语句修改。
    只能修改对应的不以 runtime 开头的表，然后 “LOAD” 使其生效，“SAVE” 使其存到硬盘以供下次重启加载。

    main库下的主要表： 
    mysql_servers: 后端可以连接 MySQL 服务器的列表 
    mysql_users:   配置后端数据库的账号和监控的账号。 
    mysql_query_rules: 指定 Query 路由到后端不同服务器的规则列表。

    ##最常用的同步到缓存和磁盘的命令
    LOAD MYSQL USERS TO RUNTIME;  将内存数据库中的配置加载到 runtime 数据结构
    SAVE MYSQL USERS TO DISK;   将内存数据库中的 MySQL 用户持久化到磁盘数据库中。
    LOAD MYSQL SERVERS TO RUNTIME;  将 MySQL server 从内存数据库中加载到 runtime。
    SAVE MYSQL SERVERS TO DISK;   从内存数据库中将 MySQL server 持久化到磁盘数据库中。
    LOAD MYSQL QUERY RULES TO RUNTIME;  将 MySQL query rules 从内存数据库加载到 runtime 数据结构。
    SAVE MYSQL QUERY RULES TO DISK;  将 MySQL query rules 从内存数据库中持久化到磁盘数据库中。
    LOAD MYSQL VARIABLES TO RUNTIME;  将 MySQL variables 从内存数据库加载到 runtime 数据结构。
    SAVE MYSQL VARIABLES TO DISK;   将 MySQL variables 从内存数据库中持久化到磁盘数据库中。
    LOAD ADMIN VARIABLES TO RUNTIME;   将 admin variables 从内存数据库加载到 runtime 数据结构。
    SAVE ADMIN VARIABLES TO DISK;  将 admin variables 从内存数据库中持久化到磁盘数据库。

二、在mysql中配置 ProxySQL 所需账户

    在 Master (192.168.88.130) 的MySQL 上创建 ProxySQL 的监控账户和对外访问账户
	##配置 ProxySQL 所需账户
	create user 'monitor'@'%' identified with mysql_native_password by '123456';
	grant all privileges on *.* to 'monitor'@'%' with grant option;

	#proxysql 的对外访问账户
	create user 'proxysql'@'%' identified with mysql_native_password by '123456';
	grant all privileges on *.* to 'proxysql'@'%' with grant option;

 三、proxysql配置

1、配置集群组 

INSERT INTO main.mysql_replication_hostgroups (writer_hostgroup,reader_hostgroup,comment) VALUES (10,20,'test_proxysql');
		load mysql servers to runtime;
		save mysql servers to disk;

写组定义与10，读组定义为20

ProxySQL 会根据mysql的read_only 的取值将服务器进行分组。 read_only=0 的mysql，master被分到编号为10的写组，read_only=1 的server，slave则被分到编号20的读组

 ProxySQL 会根据mysql的read_only 的取值将服务器进行分组。 read_only=0 的mysql，master被分到编号为10的写组，read_only=1 的server，slave则被分到编号20的读组

2、添加主从服务器节点

insert into main.mysql_servers(hostgroup_id,hostname,port) values (10,'192.168.88.130',3306);
		insert into main.mysql_servers(hostgroup_id,hostname,port) values (20,'192.168.88.131',3306);
		insert into main.mysql_servers(hostgroup_id,hostname,port) values (20,'192.168.88.132',3306);
		load mysql servers to runtime;
		save mysql servers to disk;

3、配置proxySql监控mysql的账号

set mysql-monitor_username='monitor';
set mysql-monitor_password='123456';
##或者在main库中操作
UPDATE global_variables SET variable_value='monitor' WHERE variable_name='mysql-monitor_username';
UPDATE global_variables SET variable_value='123456' WHERE variable_name='mysql-monitor_password';

load mysql variables to runtime;
save mysql variables to disk;

4、 判断是否连接成功mysql

select * from monitor.mysql_server_connect_log; 
connect_error的信息为null则表示成功

5、 为 ProxySQL 配置对外访问账号

也就是我们的app应用程序访问ProxySQL的账户密码，
SQL 请求所使用的用户配置，都需要在 MySQL 节点创建上
insert into main.mysql_users (username,password,default_hostgroup) values ('proxysql','123456',10);
load mysql users to runtime;
save mysql users to disk;

mysql_users 表有不少字段，最主要的三个字段username,password,default_hostgroup 
username: 前端链接ProxySQL ，以及ProxySQL 将SQL 语句路由给MySQL所使用的的用户名 
password：用户名对应的密码，。可以是明文密码，也可以是hash密码。如果想使用hash密码，可以先在某个MySQL节点上执行select password(PASSWORD)，然后将加密结果复制到该字段。 
default_hostgroup：该用户名默认的路由目标。例如，指定root用户的该字段值为10时，则使用 proxysql 用户发送的SQL语句默认情况下将路由到hostgroup_id=10 组中的某个节点。 
我这里 hostgroup_id = 10的组中只有一个节点就是 master : 192.168.88.130

测试登录的话要用6033端口
mysql -uproxysql -p123456 -P 6033 -h127.0.0.1

6、 配置路由规则（最简单的读写分离）

路由相关的表 mysql_query_rules 和 mysql_query_rules_fast_routing
介绍一下改表mysql_query_rules的几个字段： 
active：是否启用这个规则，1表示启用，0表示禁用 
match_pattern 字段就是代表设置规则 
destination_hostgroup 字段代表默认指定的分组， 
apply 代表真正执行应用规则。
		
创建路由规则 
1、把所有以select 开头的语句全部分配到读组中，读组编号是20 
2、把 select .. for update 语句，这是一个特殊的select语句，会产生一个写锁(排他锁)，把他分到编号为10 的写组中，其他所有操作都会默认路由到写组中
insert into main.mysql_query_rules(rule_id,active,match_pattern,destination_hostgroup,apply) values (1,1,'^select.*for update$',10,1);

insert into main.mysql_query_rules(rule_id,active,match_pattern,destination_hostgroup,apply) values (2,1,'^select',20,1);

select … for update规则的rule_id必须要小于普通的select规则的rule_id，因为ProxySQL是根据rule_id的顺序进行规则匹配的。

load mysql query rules to runtime;
save mysql query rules to disk;


测试 ^select是否生效
mysql -uproxysql -p123456 -P 6033 -h 127.0.0.1 -e "select @@server_id;"
查看server_id是否都是从库的server_id
 
测试 ^select.*for update$ 是否生效，可以在proxysql中执行，
select * from raft_log for update; （任意一个数据库，任意一张表）
然后到stats_mysql_query_digest表查看语句对应的是哪个hostgroup
select hostgroup,schemaname,username,digest_text,count_star from  main.stats_mysql_query_digest;

7、读写分离另外一种操作

根据stats_mysql_query_digest表中的digest 加入到 mysql_query_rules中，只要是digest对应的sql就会走从库

查找按总执行时间排序的前 5 个查询，并且最短执行时间至少为 1 毫秒
	SELECT digest,SUBSTR(digest_text,0,20),count_star,sum_time,sum_time/count_star avg_time, min_time, max_time FROM stats_mysql_query_digest WHERE digest_text LIKE 'SELECT%' AND min_time > 1000 ORDER BY sum_time DESC LIMIT 5;

然后把digest = 0xDA65260DF35B8D13 插入到mysql_query_rules中
	INSERT INTO mysql_query_rules (rule_id,active,digest,destination_hostgroup,apply) VALUES
	(5, 1,'0xDA65260DF35B8D13', 20, 1);

清空mysql_query_rules表执行
SELECT 1 FROM stats_mysql_query_digest_reset LIMIT 1

参考博文

https://www.cnblogs.com/keme/p/12290977.html 学习

天道酬勤-明天会更好
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
博客
Activity的生命周期和启动模式和传送数据
03-26 177
可以在AndroidManifest.xml中进行设置。也可以意图里面进行设置。
博客
安卓小练习-简易计算器
03-22 191
【代码】安卓小练习-简易计算器。
博客
安卓笔记-加油-奥利给！
03-18 502
sp: 它是专门设置字体的大小，在系统设置中可以调整字体大小。px: 手机屏幕的最小显示单位，与设备的显示屏有关。dp: 它是与设备无关的显示单位，与屏幕尺寸有关。
博客
相亲交友直播APP源码
03-08 758
后台主要功能：交友推荐、发消息、打招呼、动态滑动、相亲直播、见面直播、交友直播、多人视频、语音交友、K歌交友、专属直播、推荐动态、话题讨论、消息中心、赞和评论、视频速配、家族群聊广场、好友通讯录、好友亲密度、好友人数、好友关注、粉丝人数、我的家族、我的动态、我的认证、任务中心、玫瑰充值、钱包充值、会员、贵族、邀请推广、我的守护、我的装扮、我的等级、帮助与反馈。4、支持多平台：相亲交友直播APP源码通常是跨平台的，可以在多种操作系统和设备上运行，如iOS、Android等，以满足更多用户的需求。
博客
上门按摩预约APP源码-东郊到家源码(开发，PHP，平台搭建)
03-07 3022
3、个性化服务：上门按摩服务可以根据客户的需要和要求进行个性化服务，例如针对不同的身体部位和不同的按摩技术进行定制，满足客户的需求。1、舒适的环境：在家中享受按摩服务可以让客户在熟悉、舒适的环境中得到放松和舒缓的体验，不需要外出到陌生的环境中接受按摩。前端主要模块：首页、健康师、订单、我的四大模块。
博客
仿抖音APP短视频源码PHP安卓IOS
03-06 3605
VIP管理、社区管理、大赛管理、影视管理、系统设置、官方通知、用户举报、广告管理、奖池管理、用户管理、店铺管理、视频管理、音乐管理、直播管理、家族管理、商城管理、红包管理、守护管理、等级管理、转盘管理、分销管理、内容管理、消息管理。：推荐（仿抖音）、热门视频、活动、关注用户、上传视频、直接开拍、我的、获赞、粉丝、关注、个人信息、作品、喜欢、消息沟通、设置等等。随着短视频市场的不断发展，越来越多的人开始关注短视频APP的开发和推广。
博客
Mysql orchestrator高可用
07-28 2357
Orchestrator是一款开源，对MySQL复制提供高可用、拓扑的可视化管理工具，采用go语言编写，它能够主动发现当前拓扑结构和主从复制状态，支持MySQL主从复制拓扑关系的调整、支持MySQL主库故障自动切换(failover)、手动主从切换(switchover)等功能。............
博客
Mysql 通过binlog伪装master恢复数据库
07-20 403
假如主库被 rm -fR datadir, 数据目录被删除了，我们有binlog日志备份，怎么恢复？思路：把备份的binlog日志复制到新的3309数据库实例中，可以通过查看执行过的GTID;① 把最近用xtrabackup工具备份的数据拿到，还原到3308数据库中② 开始执行change master来拉取3309中伪装的binlog数据，让binlog从备份开始的位置重新跑一遍。③ 关键看 show slave status; Executed_Gtid_Set的Gtid有没有跟
博客
zabbix监控mysql
07-12 468
系统centos7.5https://www.zabbix.com/cn/download?zabbix=5.0&os_distribution=centos&os_version=7&db=mysql&ws=apache1、安装zabbix之前，一定要关闭 selinux， 不然PHP连接不上mysql 报错 Permission denied是，巨坑# setenforce 0 #设置selinux为permissive模式(即关闭)# setenforce 1 #设置selinux为enforcin
博客
Mysql 实用sql-每个数据库-表的大小
06-20 605
Mysql 实用sql
博客
Shell脚本练习
06-03 2948
# 脚本生成一个 100 以内的随机数,提示用户猜数字,根据用户的输入,提示用户猜对了,# 猜小了或猜大了,直至用户猜对脚本结束
博客
Mysql 触发器
06-02 217
触发器是与表有关的数据库对象，指在insert/update/delete之前和之后，触发并执行触发器中定义的sql语句集合。触发器的可以协助数据库保证数据库的完整性、日志记录、数据校验等操作。例如插入的手机号码是否正确，可以在插入前进行判断，但是一般不推荐这样做，这个功能一般是做到前端和后端去验证。重要数据的变更都有一个记录，这种用的比较多语法创建一个用户日志表，操作用户表都记录下来。创建一个用户表插入的监听器当在user表插入数据后，就会自动在user_logs表添加记录③ 用户d
博客
Mysql存储过程
06-01 382
学习技术需要掌握作用、原理、安装步骤、工具使用、模拟演示、注意细节、优点缺点原理：mysql存储过程是一组为了完成特定功能的sql语句集，经过编译后存储在数据库中，需要使用时，给定参数调用执行即可。作用：简化开发人员的工作，减少数据在数据库和应用服务器之间的传输，提高数据处理的效率解析： delimiter mysql的默认执行分割符是“;”分号， 因为我们的存储过程中有代码要使用分号，如果还是以分号为结束符的话,存储过程就会报错，所以最开始需要把分隔符分号换成$符号，最后改成分号；存储过程的创建的语
博客
Linux 三剑客grep 、sed、awk
05-31 989
Linux 三剑客是（grep，sed，awk）三者的简称，他们通常结合正则一起使用。 grep擅长查找，sed擅长修改文件。awk擅长取列。一、grepgrep是一个文本过滤工具，可以全局搜索文件中的内容参数说明-v 显示不被pattern匹配到的行 -o 仅显示匹配到的字符串 -n 显示匹配的行号 -i 忽略字符大小写 -A n 显示后n行 -B n 显示前n行 -C n 显示上下n行 -r 递归查找案例演示：① 找出1.txt 中是否有 "are" 字符串，并显
博客
Linux shell编程学习
05-29 607
一、创建一个hello.sh#!/bin/bashecho "hello world"① 注意 #!/bin/bashshell脚本以 #!/bin/bash 开头，表示我们的shell为bash shell② 脚本需要可执行权限[root@master-129 myshell]# chmod +x hello.sh [root@master-129 myshell]# ll总用量 4-rwxr-xr-x. 1 root root 32 5月 28 17:33 hel.
博客
Linux 配置环境变量
05-29 204
一、配置环境变量① 修改/etc/profile文件vim /etc/profile在profile文件的最下面添加export PATH=$PATH:/usr/local/mysql/bin ##我这里是mysql的环境变量/usr/local/mysql/bin目录为mysql的安装目录下面的bin目录， $PATH: 冒号不要忘了② 让新的环境变量生效source /etc/profile...
博客
Linux 软件包
05-29 348
一、rpm命令rpm是RedHat Package Manager（ReaHat 软件包管理工具）的缩写，以前老是不能理解这是什么意思? 可以理解为就是一个软件管理工具，例如我们windows中有360软件管家，可以上软件管家上面安装，卸载软件。① 查询已安装的rpm软件包rpm -qa | grep mysql上面我是搜索mysql相关的软件包，-q 是查询的意思-a 是列出所有的意思② 软件包的格式mha4mysql-node-0.58-0.el7.centos.n.
博客
Linux 防火墙的基本命令
05-28 201
防火墙有很多内容，先学习一下怎么给防火墙添加端口，后面有时间再重新好好学一下一、防火墙打开端口① 打开3306端口[root@master-129 ~]# firewall-cmd --permanent --add-port=3306/tcpsuccess--permanent表示永久的意思细节1：在我们打开和关闭端口后，必须重新载入防火墙配置firewall-cmd --reload细节2: add-port=3306/tcp 3306/ctp表示的是端口/.
博客
Linux 服务相关命令
05-28 326
Linux的服务跟windows中的服务是一样的，如果所示。windows中的这些服务可以手动的启动和关闭，在linux需要用到systemctl命令来进行一、systemctlsystemctl status sshd #查询sshd服务的状态systemctl stop sshd #关闭systemctl start sshd #启动systemctl restart sshd #重启二、chkconfig①作用1、可以给服务在不同的运行级别设置.
博客
Linux进程相关命令
05-28 4604
一、ps命令Linux中的ps命令是Process Status的缩写。ps命令用来列出系统中当前运行的那些进程，ps命令时列出当前进程的快照，想要动态的显示进程的相关信息，需要使用top命令① linux中进程的5中状态1、运行状态 (正在运行或在运行队列中等待） 标识 R2、中断 (休眠中, 受阻, 在等待某个条件的形成或接受到信号) S3、不可中断(收到信号不唤醒和不可运行, 进程必须等待直到有中断发生 D4、僵死(进程已终止, 但进程描述符存在, 直到父进程调用wai.

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值