Flask中SqlAlchemy的读写分离配置

最新推荐文章于 2024-08-10 14:02:16 发布
最新推荐文章于 2024-08-10 14:02:16 发布
阅读量5.7k 收藏 5
点赞数 4
分类专栏： python sqlalchemy 文章标签： python sqlalchemy
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u011801189/article/details/71144580
版权
本文讲述了在Flask项目中，使用SqlAlchemy如何配置实现读写分离的需求。作者在查找资料过程中发现Flask-SqlAlchemy的bind功能不满足需求，于是参考了SqlAlchemy官方文档和相关博客，自行编写了一个简单的读写分离解决方案。最终效果是通过DBManager类的session_ctx上下文管理器来决定请求是发送到主库还是从库。
摘要由CSDN通过智能技术生成

缘起

最近有个项目，需要提供web api出来，我很自然的选择了flask + sqlalchemy的搭配。逻辑实现上没有说的，但是到后面打算做读写分离的时候，突然发现 flask跟sqlalchemy都没有直接提供读写分离的配置。到时再最开始时使用Flask-SqlAlchemy的时候提到了有bind，但是使用起来不是很方便，不能满足我的要求。于是在网上搜索了一些，中文的资料也没有满足我的要求的。到时再google的时候，发现了一篇英文博客，于是放弃了使用Flask-SqlAlchemy，自己实现了一个简单的读写分离

需求

读写分离，我的数据表定义只有一个，通过从sqlalchemy拿到的session来决定我的这个请求时发到主库还是从库。最后达到的效果是这样的

with db_manager.session_ctx(bind='master') as session:
    session.query(....).filter(....)

# 默认走从库 
with db_manager.session_ctx() <
最低0.47元/天 解锁文章
会飞的大老虎
关注
专栏目录
flask + SQLAlchemy设置读写分离
一只路过的小码农cxy
12-04 1595
参考文档 https://www.jb51.net/article/174365.htm https://gist.github.com/trustrachel/6828122#file-routing-py 步骤 在配置中添加以下配置 SQLALCHEMY_DATABASE_URI = 'xxx' SQLALCHEMY_BINDS = { 'xxx', 'xx...
flask之flask-SQLAlchemy读写分离
yunlibiqing的博客
10-08 933
读写分离 示范代码 from flask import Flask from flask_sqlalchemy import SQLAlchemy, SignallingSession, get_state from sqlalchemy import orm app = Flask(__name__) # 设置数据库的连接地址 app.config['SQLALCHEMY_DATABASE_U...
【Python】详解 Flask 中开发与生产环境配置的分离策略
最新发布
linjiuxiansheng的博客
08-10 433
在企业级后端接口项目中，为了满足不同环境（开发和生产）的需求，我们通常需要区分不同的配置。本指南将详细介绍如何在 Flask 应用中实现这一区分。
Flask Mysql读写分离
qq_42769219的博客
06-08 200
Flask配置mysql读写分离
Flask Mysql分布式设计(读写分离)
weixin_47906106的博客
04-25 1557
Mysql分布式设计 作用 对数据备份, 实现高可用 HA (主要) 通过读写分离, 提高吞吐量, 实现高性能 原理 Mysql的复制 是一个异步的复制过程 过程本质为 Slave 从 Master 端获取 Binary Log, 然后再在自己身上完全顺序的执行日志中所记录的各种操作 MySQL 复制的基本过程如下: 1）Slave 上面的 IO 线程连接上 Master， 并请求从指定日志文件的指定位置之后的日志内容; 2）Master 接收到来自 Slave 的 IO 线程的请求后， 通过负责
06.flask实现数据库的读写分离
YPeng_Gao的博客
11-23 313
falsk实现数据库的读写分离
sqlalchemy读写分离以及按用户自动匹配用户库
全栈铲屎大将军
03-16 1542
缘起随着项目的不断进展，需要对mysql访问做读写分离，由于没有专业的运维人员做mysql的读写分离proxy，所以在配置了mysql主从库之后，暂定从代码中控制mysql的主从访问，同时，由于我们的数据架构是按照不同用户分库的，对于不同的用户要根据用户ID连接到用户所属库上，而标准的sqlalchemy配置并没有这部分的支持（没有查到资料，如果有大侠有更好的解决方案，求交流），所以只好自己动手丰...
sqlalchemy 读写分离简单封装
wwhhff11
07-23 3127
源码#!/usr/bin/env python # -*- coding: utf-8 -*- # @Time : 2017/7/22 21:50 # @Author : wanhongfei@bytedance.com # @Comment : # @File : db_util.py # @Software: PyCharm from sqlalchemy import creat
MySQL的分布式——flask-sqlalchemy实现读写分离
user_san的博客
11-12 2442
目录1、复制1.1 主从架构（一主多从）1.2 主备架构1.3 高可用复合架构2、flask-sqlalchemy实现读写分离3、分片3.1 垂直拆分3.1.1 垂直分表3.1.2 垂直分库3.2 水平拆分3.2.1 水平分表4、分布式的问题4.1 分布式事物问题解决方案4.2 解决跨节点 Join/排序/分页 1、复制 作用： 对数据进行备份，实现高可用HA 通过读写分离，提高吞吐量，实现高性能 原理： 当主库中有数据更新时，主库会将该操作写入一个二进制日志文件中，从库中专门有一个io线程去读取主库
Python全栈 Web（Flask框架、模型、sqlalchemy）
weixin_34100227的博客
09-26 163
Flask的文件传输： 如果大批量上传数据的时候（如：大文件） 就不能使用网页上传了 主要是由于http协议不支持 需要使用单独的上传工具（c/s版的） URL不存在参数上限的问题，HTTP协议规范也没有对URL长度进行限制。 这个限制是特定的浏览器及服务器对它的限制。 IE对URL长度的限制是2083字节(2K+...
Flask-SQLAlchemy内存泄露问题
amingzm123的博客
09-25 2375
Flask-SQLAlchemy内存泄露问题 现象及问题 Flask应用异步子线程跑批时，每次循环到400次左右时就会有1个worker（gunicorn启动4个worker）不明原因地发生重启，supervisor和应用无异常日志，CPU、内存占用在运行过程中持续升高，分别涨到110%和90%时worker重启，才回落。如果批次数据不大，跑完之后虽然worker不会重启，但是内存却一直没有释放，占用70%（正常20%）。 初步怀疑是内存泄露，检查循环的代码块，重点语句依次注释后压测发现问题是由于循环中的数
flask mysql读取_Flask实现mysql读写分离
weixin_29548281的博客
01-19 307
自定义Session类重写get_bind方法根据self._flushing判断读写操作, 选择对应的数据库自定义SQLAlchemy类重写create_session, 在其中使用自定义的Session类from flask import Flaskfrom flask_sqlalchemy import SQLAlchemy, SignallingSession, get_statefrom...
ORM映射
weixin_33971977的博客
07-06 306
ORM ORM 全拼Object-Relation Mapping. 中文意为 对象-关系映射. 主要实现模型对象到关系数据库数据的映射. 比如：把数据库表中每条记录映射为一个模型对象 优点 : 只需要面向对象编程, 不需要面向数据库编写代码. 对数据库的操作都转化成对类属性和方法的操作. 不用编写各种数据库的sql语句. 实现了数据模型与数据库的解耦, 屏蔽了不同数据库操作上的差...
数据库读写分离的一些坑
Wewon_real的博客
08-06 1028
1、网上传的log-bin，应为log_bin 2、语句不能追加在后面，需配置在特定位置  3、正确配置如下： # For advice on how to change settings please see # http://dev.mysql.com/doc/refman/5.6/en/server-configuration-defaults.html [mysqld] # # R
数据库读写分离之Mysql的主从配置
Odyssues_lee的博客
07-09 814
MySQL主从同步1. 主从同步的定义主从同步使得数据可以从一个数据库服务器复制到其他服务器上，在复制数据时，一个服务器充当主服务器（master），其余的服务器充当从服务器（slave）。因为复制是异步进行的，所以从服务器不需要一直连接着主服务器，从服务器甚至可以通过拨号断断续续地连接主服务器。通过配置文件，可以指定复制所有的数据库，某个数据库，甚至是某个数据库上的某个表。使用主从同步的好处：（...
flask-sqlalchemy如何实现读写分离
weixin_42289273的博客
05-14 1022
1. 概述：sqlalchemy 并没有像 django-orm 一样内置完善的读写分离方案, 但是提供了可以自定义的接口:官方文档, 我们可以借此对 flask-sqlalchemy 进行二次开发, 实现读写分离 2.基本实现思路: 实现自定义的 session类, 继承 SignallingSession类 重写 get_bind方法, 根据读写需求选择对应的数据库地址 实现自定义的 SQLAlchemy类, 继承 SQLAlchemy类 重写 create_session方法, 在内部使用自定..
SQLAlchemy 使用总结
Morgan Wang 的博客
09-08 460
# coding: utf-8 from sqlalchemy import * import tushare as ts import pandas as pd from sqlalchemy.orm import sessionmaker,mapper from datetime import * engine = create_e...
flask框架学习笔记——SQLAlchemy外键约束
fnms88的博客
11-19 575
from flask import Flask import config from flask_sqlalchemy import SQLAlchemy app = Flask (name) app.config.from_object(config) db=SQLAlchemy(app) class User(db.Model): tablename=‘user’ id=db.Column(d...
Flask中sqlalchemy配置项
06-07
在Flask中配置SQLAlchemy需要以下步骤： 1. 安装SQLAlchemy库：`pip install sqlalchemy` 2. 在Flask应用程序中导入SQLAlchemy：`from flask_sqlalchemy import SQLAlchemy` 3. 配置Flask应用程序的数据库URI，例如： ```python app.config['SQLALCHEMY_DATABASE_URI'] = 'sqlite:////tmp/test.db' ``` 这里使用SQLite数据库，URI的格式为`sqlite:///文件路径`。 4. 创建SQLAlchemy对象：`db = SQLAlchemy(app)` 完整的示例代码如下： ```python from flask import Flask from flask_sqlalchemy import SQLAlchemy app = Flask(__name__) app.config['SQLALCHEMY_DATABASE_URI'] = 'sqlite:////tmp/test.db' db = SQLAlchemy(app) class User(db.Model): id = db.Column(db.Integer, primary_key=True) username = db.Column(db.String(80), unique=True, nullable=False) def __repr__(self): return '<User %r>' % self.username ``` 这里创建了一个User模型，继承自`db.Model`，并定义了两个属性：`id`和`username`。`__repr__`方法定义了该模型的字符串表示形式。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值