sqlobject源码分析

已于 2023-12-04 19:58:25 修改
阅读量35 收藏
点赞数
文章标签： python
于 2023-12-04 19:56:55 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Doubter_/article/details/134792682
版权

sqlobject是一个orm框架

基本组成

SQLObject：数据类通过继承该类获取orm能力，用户层代码主要基于这个类的api操作数据库

SelectResult：查询结果的抽象，以懒加载的形式处理查询结果

DBConnection：数据库连接的抽象

大致可以分为三层：API层、中间层（构建sql等）、数据库交互层

查询执行过程

以查询18岁的学生为例

class StudentDao(SQLObject):
    class sqlmeta:
        table = 'student'
    name = StringCol()
    age = IntCol()

  1. StudentDao.selectBy(age=18)

  2. 根据查询条件拼接sql

    DBAPI._SO_columnClause

  3. 构造SelectResult实例，作为懒加载的查询结果返回

    初始化过程会对排序、范围查询

  4. 用户代码遍历SelectResult结果获取数据时才会触发向数据库发起查询

    SelectResult.__iter__=>SelectResult.lazyIter

    1. 获取数据库连接

    2. 构造dbconnection.Iteration，该迭代器负责真正的查询数据迭代过程

      执行查询获取cursor，并通过cursor查出一条条记录

    3. 通过dbconnection.Iteration获取所有查询结果，放到list中

    4. 将包含查询结果的list重新包装成一个迭代器，用户代码每遍历一次则从list中获取一条记录

整体来看，SQLObject的查询过程为：

SQLObject=>SelectResult=>DBAPI=>dbconnection.Iteration=>DBAPI._executeRetry

CCBBCD
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
解析Python编程中的包结构
m0_59485658的博客
03-13 856
在最简单的情况下，__ init__.py可以只是一个空文件，但它也可以执行包的初始化代码，包括设置__all__变量，稍后介绍。import语句首先测试导入的对象是否包中定义，如果没有，它假定这是一个模块，并尝试加载它。通常由它们的扩展有不同的声音格式，例如：WAV，AIFF，AU），所以你可能需要创建和维护一个不断增长的各种文件格式之间的转换的模块集合。wheel 本质上是一个 zip 包格式，它使用 .whl 扩展名，用于 python 模块的安装，它的出现是为了替代 Eggs。
基于Visual C++2010 混合Python编程以及Python简介
尹成的技术博客
04-24 1万+
我们重点讲解如何在基于Visual C++2010 开发Python的调用，先介绍下Python， Python 具有脚本语言中最丰富和强大的类库，足以支持绝大多数日常应用。它的名字来源于一个喜剧,也许最初设计Python这种语言的人并没有想到今天Python会在工业和科研上获得如此广泛的使用。著名的自由软件作者Eric Raymond在他的文章《如何成为一名黑客》中，将Python列为黑
mycat 源码分析
西京刀客
10-26 1294
Druid 源码学习 Druid SQL 解析器的解析过程 Druid SQL 解析器的解析过程 参考URL: https://segmentfault.com/a/1190000008120254 [推荐]Druid SqlParser理解及使用入门 参考URL: https://www.cnblogs.com/lay2017/p/9840394.html public class Parser...
SQLStatementParser 源码分析
ning_jerry的博客
05-14 1376
　druid的工具的　sql语句分析器　SQLStatementParser ，很犀利，一直想一探究竟，今天正好有时间，来学习下。 先看下　SQLStatementParser的类结构： protected SchemaRepository repository; protected SQLExprParser exprParser; protected boolean parseCompleteValues = true; protected int
python中结构分析_解析Python编程中的包结构
weixin_39625586的博客
12-08 40
假设你想设计一个模块集(也就是一个“包”)来统一处理声音文件和声音数据。通常由它们的扩展有不同的声音格式，例如：WAV，AIFF，AU)，所以你可能需要创建和维护一个不断增长的各种文件格式之间的转换的模块集合。并且可能要执行声音数据处理(如混合，添加回声，应用平衡功能)，所以你写一个永无止境的流模块来执行这些操作：模块设计的包如下：sound/ Top-level pack...
C++网站开发MVC框架TreeFrog Framework教程——3.代码解析
hyman.lu
06-12 1369
本文详细剖析了在上一篇博客中利用框架自动生成的源代码，到底程序是怎么跑起来的，具体讲述MVC这三部分是如何相互配合的。
TreeFrog 之生成器
baidu_33570760的博客
06-20 469
生成器 在这一章节,我们将看看命名为tspawn的生成器命令. 生成应用程序框架 首选, 在我们做其他事情前需要创建一个应用程序的框架.我们将再次使用blogapp创建.从命令行输入下面的命令(在Windows上,从Treefrog命令行窗口执行) $ tspawn new blogapp 当你执行完这条命令, 应用名将作为目录树的根目录.配置文件(ini)和项目文件(pro)
Python简介
热门推荐
乐沙弥的世界
10-20 1万+
一、什么是Python   Python 是一个有条理的和强大的面向对象的程序设计语言，类似于Perl, Ruby, Scheme, 或 Java.它被逐渐广泛应用于系统管理任务的处理和Web编程。   Python注重的是如何解决问题而不是编程语言的语法和结构。 Python是一种简单易学，功能强大的编程语言，它有高效率的高层数据结构，简单而有效地实现面向对象编程。 Python简洁的语法和对动...
Plone学习笔记 ( by quqi99 )
技术并艺术着
10-19 9850
                                          Plone学习笔记 ( by quqi99 )  作者：张华 发表于：2008-10-19  ( http://blog.csdn.net/quqi99 )版权声明：可以任意转载，转载时请务必以超链接形式标明文章原始出处和作者信息及本版权声明。
SQLObject-Java-开源
05-15
SQLObject是Java编程语言中的一款开源对象关系映射（ORM）框架，它允许开发者使用面向对象的方式来处理数据库操作，从而简化了数据存取的工作。在Java应用开发中，ORM工具如SQLObject，使得数据库操作更加直观，提高...
SQLObject-1.5.1
12-16
SQLObject 是一个面向对象的数据库抽象层（Object-Relational Mapping，ORM）库，用于Python编程语言。ORM允许程序员使用类似面向对象的方式来操作数据库，而不是直接编写SQL语句。SQLObject 1.5.1是该库的一个版本...
sqlobject：SQLObject，Python的对象关系映射器
01-28
在`sqlobject-master`这个压缩包中，通常会包含SQLObject的源码、文档、示例和测试用例。通过阅读源码，你可以深入理解其内部实现机制，而文档和示例则可以帮助你快速掌握如何在项目中使用SQLObject。如果你正在寻找...
Python的ORM框架SQLObject入门实例
12-25
SQLObject和SQLAlchemy都是Python语言下的ORM（对象关系映射）解决方案，其中SQLAlchemy被认为是Python下事实上的ORM标准。当然，两者都很优秀。 一、安装复制代码 代码如下:sudo pip install SQLObject使用...
python sqlobject(mysql)中文乱码解决方法
12-24
UnicodeEncodeError: ‘latin-1’ codec can’t encode characters in position； 找了一天终于搞明白了，默认情况下，mysql连接的编码是latin-1，你需要指定使用什么编码方式: connectionForURI(mysql://user:...
Java基础:爬虫
weixin_65752158的博客
07-04 1019
Pattern:表示正则表达式Matcher:文本匹配器，作用按照正则表达式的规则去读取字符串，从头开始读取。在大串中去找符合匹配规则的子串。通过Pattern p = Pattern.compile("正则表达式");获得 通过Matcher m = p.matcher(str);获得 (m要在str中找符合p规则的小串)其中, m为Matcher对象, p为正则表达式规则, str为要验证的字符串. boolean b = m.find(); 表示拿着文本匹配器从头开始读取，寻找是否有
基数排序算法Python实现
最新发布
PeterClerk的博客
07-09 203
基数排序算法实现
pandas，dataframe使用笔记
分享计算机视觉，C++，嵌入式等知识。
07-05 478
dataframe属于pandas。
Python28-7.3 降维算法之多维缩放MDS
Argulo的博客
07-05 652
多维尺度分析（Multidimensional Scaling, MDS）是一种用于降维的统计技术，其目标是将高维数据嵌入到低维空间中，同时尽量保持原始数据中点与点之间的距离关系。MDS 的目标是将高维数据中的点嵌入到低维（通常是二维或三维）空间中，使得在低维空间中点之间的距离尽量接近原始高维空间中点之间的距离。这通过最小化一个损失函数（通常是应力函数）来实现，应力函数衡量的是原始距离和降维后距离之间的不一致性。：对原始数据中的距离或相似度进行非度量变换，以保留原始数据中的顺序信息，而不是精确的距离值。
编写Java代码，使用druid实现sql解析血缘关系，包括表、字段血缘关系分析
06-02
以下是一个使用Druid实现SQL解析血缘关系的Java代码示例： ``` import com.alibaba.druid.sql.SQLUtils; import com.alibaba.druid.sql.ast.SQLExpr; import com.alibaba.druid.sql.ast.SQLObject; import com.alibaba.druid.sql.ast.SQLStatement; import com.alibaba.druid.sql.ast.expr.SQLIdentifierExpr; import com.alibaba.druid.sql.ast.statement.*; import com.alibaba.druid.sql.parser.SQLParserUtils; import com.alibaba.druid.sql.parser.SQLStatementParser; import com.alibaba.druid.stat.TableStat; import com.alibaba.druid.stat.TableStat.Column; import com.alibaba.druid.stat.TableStat.Name; import java.util.*; public class SqlLineageParser { private Map<String, List<String>> tableMap = new HashMap<>(); private Map<String, List<String>> columnMap = new HashMap<>(); public void parseSqlLineage(String sql) { List<SQLStatement> stmtList = SQLUtils.parseStatements(sql, "mysql"); for (SQLStatement stmt : stmtList) { if (stmt instanceof SQLSelectStatement) { SQLSelectStatement selectStmt = (SQLSelectStatement) stmt; SQLSelectQueryBlock queryBlock = (SQLSelectQueryBlock) selectStmt.getSelect().getQuery(); // 解析表血缘关系 List<SQLTableSource> fromList = queryBlock.getFrom(); for (SQLTableSource tableSource : fromList) { if (tableSource instanceof SQLExprTableSource) { SQLExprTableSource exprTableSource = (SQLExprTableSource) tableSource; String tableName = getTableName(exprTableSource.getExpr()); if (tableName != null) { addTableDependency(tableName); } } else if (tableSource instanceof SQLJoinTableSource) { SQLJoinTableSource joinTableSource = (SQLJoinTableSource) tableSource; SQLTableSource left = joinTableSource.getLeft(); SQLTableSource right = joinTableSource.getRight(); if (left instanceof SQLExprTableSource) { SQLExprTableSource exprTableSource = (SQLExprTableSource) left; String tableName = getTableName(exprTableSource.getExpr()); if (tableName != null) { addTableDependency(tableName); } } if (right instanceof SQLExprTableSource) { SQLExprTableSource exprTableSource = (SQLExprTableSource) right; String tableName = getTableName(exprTableSource.getExpr()); if (tableName != null) { addTableDependency(tableName); } } } } // 解析字段血缘关系 List<SQLSelectItem> selectList = queryBlock.getSelectList(); for (SQLSelectItem selectItem : selectList) { SQLExpr expr = selectItem.getExpr(); if (expr instanceof SQLIdentifierExpr) { SQLIdentifierExpr identifierExpr = (SQLIdentifierExpr) expr; String columnName = identifierExpr.getName(); String tableName = getColumnTableName(identifierExpr); if (tableName != null) { addColumnDependency(tableName, columnName); } } } } } } private String getTableName(SQLExpr expr) { if (expr instanceof SQLIdentifierExpr) { SQLIdentifierExpr identifierExpr = (SQLIdentifierExpr) expr; return identifierExpr.getName(); } else if (expr instanceof SQLPropertyExpr) { SQLPropertyExpr propertyExpr = (SQLPropertyExpr) expr; SQLExpr owner = propertyExpr.getOwner(); String tableName = getTableName(owner); if (tableName != null) { return tableName + "." + propertyExpr.getName(); } } return null; } private String getColumnTableName(SQLIdentifierExpr identifierExpr) { String columnName = identifierExpr.getName(); Name name = identifierExpr.name(); Map<Name, Column> columns = TableStat.getColumns(); for (Map.Entry<Name, Column> entry : columns.entrySet()) { Column column = entry.getValue(); if (column.getName().equals(columnName)) { Name tableName = entry.getKey().getParent(); return tableName.getName(); } } return null; } private void addTableDependency(String tableName) { if (!tableMap.containsKey(tableName)) { tableMap.put(tableName, new ArrayList<>()); } } private void addColumnDependency(String tableName, String columnName) { if (!columnMap.containsKey(columnName)) { columnMap.put(columnName, new ArrayList<>()); } List<String> tableList = tableMap.get(tableName); if (tableList != null) { for (String table : tableList) { String column = table + "." + columnName; if (!columnMap.containsKey(column)) { columnMap.put(column, new ArrayList<>()); } columnMap.get(column).add(tableName); } } } public Map<String, List<String>> getTableMap() { return tableMap; } public Map<String, List<String>> getColumnMap() { return columnMap; } public static void main(String[] args) { String sql = "select t1.id, t2.name from table1 t1 join table2 t2 on t1.id = t2.id where t1.age > 18"; SqlLineageParser parser = new SqlLineageParser(); parser.parseSqlLineage(sql); System.out.println("Table Map: " + parser.getTableMap()); System.out.println("Column Map: " + parser.getColumnMap()); } } ``` 在以上代码中，我们通过Druid提供的SQL解析工具解析SQL语句，并通过解析结果获取表和字段的元数据信息。通过分析SQL语句中的表和字段引用关系，我们可以构建出表和字段的血缘关系。最后，我们可以通过getTableMap()和getColumnMap()方法获取解析结果。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值