mysq通过ProxySQL实现读写分离

最新推荐文章于 2024-09-12 12:42:46 发布
最新推荐文章于 2024-09-12 12:42:46 发布
阅读量133 收藏 1
点赞数
分类专栏： Linux运维 文章标签： mysql 读写分离 ProxySQL
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_33702024/article/details/90055154
版权
本文介绍了如何通过ProxySQL实现MySQL的读写分离。首先，讲解了ProxySQL作为MySQL中间件的角色及其特性，包括其读/写分离、监控和缓存等功能。接着，详细阐述了ProxySQL的安装步骤，强调了在实现读写分离前需确保主从复制配置正确。在配置ProxySQL时，重点讨论了如何添加和管理后端节点，设置读写组，并创建路由规则以确保SELECT语句被正确路由到读组，而写操作则路由到写组。最后，通过测试验证了读写分离的正确性。
摘要由CSDN通过智能技术生成

mysq通过ProxySQL实现读写分离

常见的读写分离应用

	Oracle：mysql-proxy
	qihoo：Atlas
	美团：dbproxy
	网易：cetus
	amoeba
	阿里巴巴：cobar 基于amoeba研发
	Mycat：基于cobar实现
	ProxySQL

ProxySQL：MySQL中间件

  • 版本：
    • 官方版
    • percona版：percona公司基于官方版本用C++语言开发，性能更优
  • 特点：具有中间件所需的绝大多数功能，包括：
    • 多种方式的读/写分离
    • 定制基于用户、基于schema、基于语句的规则对SQL语句进行路由
    • 缓存查询结果
    • 后端节点监控

官方站点：https://proxysql.com/

ProxySQL安装：

  • 准备：

    • 实现读写分离前，先实现主从复制

      注：slave服务器 配置文件中必须为 read_only=1，ProxySQL通过read_only=1参数，确定哪个是salve服务器

  • 基于YUM仓库安装：

    [ root@centos ~]# cat <<EOF | tee /etc/yum.repos.d/proxysql.repo
    [proxysql_repo]
    name= ProxySQL YUM repository
    baseurl=http://repo.proxysql.com/ProxySQL/proxysql-1.4.x/centos/\$releasever
    gpgcheck=1
    gpgkey=http://repo.proxysql.com/ProxySQL/repo_pub_key
    EOF

  • 基于RPM下载安装：https://github.com/sysown/proxysql/releases

  • ProxySQL的组成：

    • 服务脚本：/etc/init.d/proxysql
    • 配置文件：/etc/proxysql.cnf
    • 主程序：/usr/bin/proxysql
    • 基于SQLITE的数据库文件：/var/lib/proxysql/

  • 启动ProxySQL：service proxysql start

    • 启动后会监听两个默认端口：
      • 6032：ProxySQL的管理端口
      • 6033：ProxySQL对外提供服务的端口

  • 使用mysql客户端连接到ProxySQL的管理端口6032，默认管理员用户和密码都是admin

	[ root@weiying ~]# mysql -uadmin -padmin -p6032 -hhost
  • ProxySQL实现读写分离:

    内置了SQLite小型数据库，里面存储了proxysql的设置

    • 内置的数据库说明：
最低0.47元/天 解锁文章
魏颖
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
PHP实现Mysq读写分离（附完整源码）
希望我的博客，能帮上你解决学习中工作中所遇到的问题
05-07 161
PHP实现Mysq读写分离（附完整源码）
ProxySQL 部署 Single Writer Failover 读写分离 (PXC)
weixin_34130389的博客
03-27 151
主机信息: Proxysql: 如果你忽略了ProxySQL会报告主机组的变化，我建议把它设置为0，除非你试图调试“某些东西”，否则你的日志将很快变得巨大。UPDATE global_variables SET Variable_Value=0 WHERE Variable_name='mysql-hostgroup_manager_verbose'; 在PXC 5.7...
ProxySQL实现读写分离
weixin_43154788的博客
11-26 530
ProxySQL简介 ProxySQL 是一款可以实际用于生产环境的 MySQL 中间件，它有官方版和 percona 版两种。percona版是在官方版的基础上修改的，添加了几个比较实用的工具。生产环境建议用官方版。 ProxySQL 是用 C++ 语言开发的，虽然也是一个轻量级产品，但性能很好(据测试，能处理千亿级的数据)，功能也足够，能满足中间件所需的绝大多数功能，包括： 最基本的读/写分离...
[mysql]-mysql使用proxysql实现读写分离
爷来辣的博客
07-04 1471
1 ProxySQL简介： ProxySQL是一个高性能的MySQL中间件，拥有强大的规则引擎。官方文档：https://github.com/sysown/proxysql/wiki/下载地址：https://github.com/sysown/proxysql/releases/ 2 环境： 系统：CentOS7.5 ProxySQL版本：proxysql-1.4.8-1-centos...
基于ProxySQL读写分离实现
qiuxinbo的博客
08-21 966
基于ProxySQL-SQL语句的读写分离实现 前段时间与一个同事聊天，过程中却被吐槽。 因为自己的博客中空空如也，一直是技术类文章忠实的读者和使用者，自己却不曾有什么分享 有点惭愧… 最近刚好完成了一些项目，特此做些总结和分享 （附上Larry Ellison的照片，吐槽下MySQL Proxy就别自己写了，这么多年还没有GA版本，还是买吧，毕竟有钱~） 1、读写分离概述 读写分离是数据库架构...
网易分片中间件cetus扩容方案
老叶茶馆
05-31 676
网易中间件Cetus介绍网易电商近年来业务呈现爆发式增长，原架构环境下，数据库的性能和吞吐量已无法应对其带来的巨大压力，为彻底解决数据库的瓶颈，Cetus应运而生。Cet...
mysql5.7+proxy_mysql5.7使用ProxySQL实现读写分离
weixin_39760919的博客
01-19 389
ProxySql是MySQL的一款中间件产品，是灵活强大的mysql代理层，可以实现读写分离，支持query路由功能，支持动态指定某个sql进行缓存，支持动态加载配置。故障切换和一些sql过滤功能。实战演练环境centos7.5 mysql5.7ip：10.106.145.181(从) 10.106.145.182(主) 10.106.145.183(从)注意：另个从库设置为read_only=o...
mysql同步大师_大师网-ProxySQL+MGR+读写分离（完结）
weixin_39820136的博客
02-02 166
前置条件：完成MGR部署MGR部署参考：MGR单主部署此外需要将MGR的从节点设置read_only=1架构ProxySQL：172.17.100.101MGR单主：172.17.100.101MGR双从：172.17.100.103172.17.100.104部署ProxySQL#下载安装最新的proxy1.4.x版本(本段摘抄自骏马金龙博客：http://www.cnblogs.com/f-c...
Mysql读写分离，Mycat、ProxySQL（代理服务器）--多种问题
weixin_45697293的博客
12-18 2829
MySQL读写分离 ProxySQL https://proxysql.com/ ProxySQL： MySQL中间件 两个版本：官方版和percona版，percona版是基于官方版基础上修改C++语言开发，轻量级但性能优异(支持处理千亿级数据)具有中间件所需的绝大多数功能，包括： 多种方式的读/写分离 定制基于用户、基于schema、基于语句的规则对SQL语句进行路由 缓存查询结果 后端节点监控 官方站点：https://proxysql.com/ 官方手册：https://github.com/sy
mysql读写分离调度器
06-05
读写分离通过将读操作和写操作分配到不同的数据库服务器，可以显著提高系统处理能力，减轻主库的压力，确保数据的一致性。 MySQL Proxy是实现这一策略的一个工具，它是一个轻量级的中间件，位于客户端应用程序和...
使用MyCat实现MySQL读写分离
s7827462的博客
06-11 610
实验环境： 操作系统：ubuntu18.04.5 服务器：
linux mysql 代理_mysql-proxy代理加MySQL主从实现读写分离
weixin_30026331的博客
01-26 269
一：实验目标MySQL Proxy(代理)服务概述MySQL Proxy实现读写分离MySQL Proxy+mysql主从实现读写分离二：实验环境：关闭防火墙mysql-proxy服务端：linuxidc62.cn IP：192.168.1.62mysql服务器(主，负责写)服务端：linuxidc63.cn IP：192.168.1.63mysql服务器(从，负责读)客户端：linuxidc64...
【MySQL】表的操作【有关表结构的操作】【创建、查看、删除、修改表结构】
aaa114514aaaa的博客
09-12 861
对于mysql数据库的表的结构的查看，创建、删除、修改、【对字段的添加、修改】
MySQL表操作及约束
2301_77479435的博客
09-06 1150
MySQL表操作及约束
【mysql】mysql之优化
zerotoall的博客
09-11 2444
数据库优化 　 一、数据库硬件优化（选型） 　　 1.一般数据库选择 　　 2.数据库类型 　　 3.硬件选型 　　 4.操作系统优化 　　 5.应用端优化 　 二、创建数据库 　　 1.创建一个库一个表，并插入100万数据 　　 2.查看数据可用性 　　 3.进行压力测试 　 三、数据库参数优化 　　 1.Max_connections 　　 2.back_log 　　 3.wait_timeout和interactive_timeout 　　
MySQL的DDL、DML、DQL
liuchanj的博客
09-07 1457
DDL：数据定义语言查询所有数据库：show databases;查询当前数据库：show databases();使用数据库：use 数据库名;创建数据库：create database [if not exists] 数据库名;删除数据库：drop database [if exists] 数据库名;创建表：create table 表名(字段1 字段1类型 [约束] [comment 字段1注释 ],
MySQL缓存策略
最新发布
oxygen3000的博客
09-12 811
我们可以先写Redis，设置key的过期时间（一般为200ms），再马上去写MySQL，最后MySQL同步回Redis，如果MySQL写成功了，就可以同步到Redis，这一整个写操作就完成了，如果写MySQL失败了，数据就没有，就不需要同步，Redis的数据也过期自动删除，这样就当没写过。这种策略就实实在在的保证了数据一致性
MYSQL2
北冥有渔的博客
09-09 1728
当然啦，平时用的最多还是删除空格，所以简单格式的 trim 一定要会用，然后掌握高级格式的 trim 即可！一个事务就是一个完整的业务逻辑（业务流程），是一个最小的工作单元，不可再分。说白了一个事务就是完成一件事。例子假设转账，从A账户向B账户中转账10000。将A账户的钱减去10000，B账户的钱加上10000这就是一个完整的事务逻辑。以上的操作是一个最小的工作单元，要么同时成功，要么同时失败，不可再分。说到底，一个事务其实就是多条DML语句同时成功或者同时失败。
使用Java代码实现MySQ通过表添加tenant_id列来标识不同租户
05-31
实现MySQL多租户数据隔离的另一种常见方法是通过在表中添加一个`tenant_id`列来标识不同的租户。下面是使用Java代码实现该方法的步骤： 1. 创建一个Java类来管理数据库连接和操作。这个类应该包含以下方法： ``` public class DatabaseManager { private static final String DATABASE_HOST = "localhost"; private static final String DATABASE_USERNAME = "root"; private static final String DATABASE_PASSWORD = "password"; private static final String DATABASE_NAME = "my_database"; private static final String DATABASE_DRIVER = "com.mysql.jdbc.Driver"; private Connection connection; public DatabaseManager() throws SQLException, ClassNotFoundException { Class.forName(DATABASE_DRIVER); this.connection = DriverManager.getConnection("jdbc:mysql://" + DATABASE_HOST + "/" + DATABASE_NAME, DATABASE_USERNAME, DATABASE_PASSWORD); } public void executeQuery(String query) throws SQLException { Statement statement = connection.createStatement(); statement.executeQuery(query); statement.close(); } public void executeUpdate(String query) throws SQLException { Statement statement = connection.createStatement(); statement.executeUpdate(query); statement.close(); } public void closeConnection() throws SQLException { this.connection.close(); } } ``` 2. 创建一个Java类来管理租户列表。这个类应该包含以下方法： ``` public class TenantManager { private Map<String, DatabaseManager> tenantDatabaseManagerMap = new HashMap<>(); public void addTenant(String tenantId) throws SQLException, ClassNotFoundException { if (!tenantDatabaseManagerMap.containsKey(tenantId)) { DatabaseManager databaseManager = new DatabaseManager(); databaseManager.executeUpdate("CREATE TABLE IF NOT EXISTS table_name (id INT PRIMARY KEY, column1 VARCHAR(255), column2 VARCHAR(255), tenant_id VARCHAR(36))"); tenantDatabaseManagerMap.put(tenantId, databaseManager); } } public DatabaseManager getDatabaseManager(String tenantId) { return tenantDatabaseManagerMap.get(tenantId); } public void closeAllConnections() throws SQLException { for (DatabaseManager databaseManager : tenantDatabaseManagerMap.values()) { databaseManager.closeConnection(); } tenantDatabaseManagerMap.clear(); } } ``` 3. 在每次请求到达时，从请求中获取租户ID，并使用TenantManager获取对应的DatabaseManager对象。然后使用该对象执行数据库操作。例如： ``` public class RequestHandler { private static final String TENANT_HEADER = "Tenant-Id"; private TenantManager tenantManager; public RequestHandler() { tenantManager = new TenantManager(); } public void handleRequest(HttpServletRequest request, HttpServletResponse response) throws IOException, ServletException, SQLException, ClassNotFoundException { String tenantId = request.getHeader(TENANT_HEADER); if (tenantId == null) { response.setStatus(HttpServletResponse.SC_BAD_REQUEST); response.getWriter().println("Tenant Id is required."); return; } DatabaseManager databaseManager = tenantManager.getDatabaseManager(tenantId); if (databaseManager == null) { tenantManager.addTenant(tenantId); databaseManager = tenantManager.getDatabaseManager(tenantId); } String insertQuery = "INSERT INTO table_name (id, column1, column2, tenant_id) VALUES (1, 'value1', 'value2', '" + tenantId + "')"; databaseManager.executeUpdate(insertQuery); String selectQuery = "SELECT * FROM table_name WHERE tenant_id = '" + tenantId + "'"; ResultSet resultSet = databaseManager.executeQuery(selectQuery); while (resultSet.next()) { int id = resultSet.getInt("id"); String column1 = resultSet.getString("column1"); String column2 = resultSet.getString("column2"); // process results } resultSet.close(); } public void destroy() throws SQLException { tenantManager.closeAllConnections(); } } ``` 以上就是使用Java代码实现MySQL通过表添加`tenant_id`列来标识不同租户的方法。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值