golang sql源码学习记录

最新推荐文章于 2023-02-27 10:06:06 发布
最新推荐文章于 2023-02-27 10:06:06 发布
阅读量920 收藏 1
点赞数
分类专栏： golang源码阅读 文章标签： golang
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u014763610/article/details/124080527
版权

sql

总结

golang只实现了框架，用于如何连接数据库，具体的数据库连接的驱动，由各类数据库实现，如postgresql为pg,mysql为mysql，整体实现为driver目录下定义各种接口，接口定义得比较细致，可能一个函数就对应一个接口，sql目录下实现整体框架，DB结构体为整体入口，Open函数会创建DB，使用DB调用各类操作函数

接口

接口定义在driver目录下

  • driver.Driver，具体驱动实现该接口
    • Open(name string) (Conn, error)， 用于新开一个连接
  • driver.DriverContext
    • OpenConnector(name string) (Connector, error)，用于新开一个Connector
  • driver.Connector
    • Connect(context.Context) (Conn, error), 用于新开一个Conn
    • Driver() Driver 返回Connector对应的Driver
    • struct dsnConnect为Connector接口的默认实现
  • driver.Conn
    • Prepare(query string) (Stmt, error)
    • Close() error
    • Begin() (Tx, error)
  • driver.Stmt，具体数据库操作实现的接口
    • Close() error，关闭statement
    • NumInput() int，返回参数个数
    • Exec(args []Value) (Result, error)，该接口已经Deprecated，Driver应该实现StmtExecContext
    • Query(args []Value) (Rows, error)，该接口已经Deprecated，Driver应该实现StmtQueryContext
  • driver.Tx
    • Commit() error，事务提交
    • Rollback() error，事务回滚
  • driver.Pinger，发送ping消息，保持连接存活
    • Ping(ctx context.Context) error
  • driver.Execer，定义Exec的接口
    • Exec
  • driver.ExecerContext
    • ExecContext(ctx context.Context, query string, args []NamedValue) (Result, error)
  • driver.Queryer, 查询接口定义,已经Deprecated
    • Query(Query string, args []Value) (Rows, error)
  • driver.QueryerContext
    • QueryContext(ctx context.Context, query string, args []NamedValue) (Rows, error)
  • driver.ConnPrepareContext
    • PrepareContext(ctx context.Context. query string) (stmt, error)
  • Driver.ConnBeginTx
    • BeginTx(ctx context.Context, opts TxOptions) (Tx, error)
  • SessionResetter，重设连接的session
    • ResetSession

框架实现函数

  • sql.Open函数
    • 从drivers里面获取注册的驱动，如果没有返回err
    • 如果对应的驱动实现了driver.DriverContext接口，然后调用该接口获取Connector，最后调用OpenDB函数
    • 如果没有实现，使用默认实现的dsnConnector，最后调用OpenDB
  • sql.Register函数，各个驱动注册自己的driver.Driver实现到drivers（map存储），如果重复，会panic
  • OpenDB函数，返回sql.DB结构体，主要启动一个后台deamon，用于管理connection
    • 生成待cancel的context，cancel放到sql.DB中
    • context传入connectionOpener，并且通过go异步出去，这个是个connection的deamon，用于在出现错误的时候，新建connection
      • connectionOpener是一个for循环，通过ctx.Done退出循环
      • 通过openerCh来触发openNewConnection
      • openerCh的输入方为maybeOpenNewConnections函数，如果numRequests（请求数）大于0，则新建一个
    • openNewConnection
      • 通过connector新建一个Connector ci
      • 把新建的ci放到driverConn里，如果connRequests大于0，通过从connRequests（map[uint64] chan connRequest）的随机获取一个chan，把driverConn给对应的请求
      • 如果没有请求，则放到freeConn里面去，如果没有超过maxIDleConns
  • sql.DB里的具体函数实现，用于数据库请求
    • PrepareContext函数，Prepare函数调用PrepareContext，返回Stmt
      • 会重试，大小为maxBadConnRetries（值为2）
      • 调用prepare->conn->prepareDC
    • prepare函数
      • 调用conn函数-> prepareDC函数
    • conn函数，返回driverConn，跟openNewConnection实现类似
      • 判断当前DB是否已经被关闭
      • 如果strategy是cachedOrNewConn，且freeConn里面还有空闲conn，则直接使用，如果获取的conn已经过期了，直接返回driver.ErrBadConn
      • 如果maxOpen大于0，且当前打开的numOpen不小于maxOpen，则新建一个connRequest，放到connRequests里去，然后等待putConnDBLocked里往chan里写入connRequest
      • 下面是创建的场景，connector调用Connect函数，返回Connector ci，然后封装到driverConn里面，并放到Dep里面去
    • prepareDC,将query、driverConn、release封装到Stmt（支持并发，底层绑定的是同一个connection）
      • 里层调用ctxDriverPrepare函数，返回driverStmt
        • 如果driver.Conn实现了driver.ConnPrepareContext函数，则调用该PrepareContext函数
        • 如果没有实现，则调用Conn的Prepare函数
      • 将driverStmt、db、query等封装到Stmt里
    • ExecContext，有retry，默认2次，执行exec函数
    • exec
      • 先调用conn函数，获取driverConn
      • 调用execDC函数
    • execDC
      • 如果driverConn.ci Connector实现了ExecerContext，或者driver.Execer，则调用对应的函数
      • 如果没有实现，则调用ctxDriverPrepare函数和resultFromStatement，大体跟上面差不多
    • QueryContext，执行查询，上面exec，sql都执行，tx除外，几种类型的命名风格都类似，先调用conn，然后执行*DC
      • query函数实现，先调用conn获取连接
      • 再调用queryDC
    • queryDC函数
      • 看Connector是否实现dirver.QueryerContext或者Queryer接口，如果是，直接调用对应的实现
      • 没有实现，则是默认实现，调用ctxDriverPrepare和rowsiFromStatement返回结果
    • BeginTx
      • 失败会重试1次
      • 调用begin函数
    • begin，开始事务
      • conn，获取driverConn
      • 调用beginDC，返回sql.Tx
        • driverConn的ci（Conn）实现了ConnBeginTx，则调用对应的实现
        • 否则调用Begin函数
    • Driver函数，返回DB存的Driver
  • Conn结构体，集成到DB中，DB的Conn函数，返回一个可用的Conn
    • PingContext函数，调用DB的pingDC函数，发送ping命令，实则为Pinger接口，具体为各个数据库驱动实现
ase2014
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Golang Channel源码解析
01-20
文章目录channelsHow to use ChannelsChannel源码解析代码入口channel的结构体新建channelchannel发送元素channel读取元素关闭channelselect channelchannel reveive valuechannel send value用于判断channel是否关闭的场景 channels channel存在以下四个特性 goroutine-safe store and pass values between goroutines provide FIFO semantics can cause goroutines to blo
Go语言中database/sql包操作MySQL（访问数据库）
万彬学习的博客
03-20 4454
现在你已经加载了驱动程序包，你已经准备好创建一个数据库对象了sql.DB。创建一个sql.DB，你使用sql.Open()。将返回一个*sql.DB：func main() { db, err := sql.Open("mysql", "user:password@tcp(127.0.0.1:3306)/test") if err != nil { log.Fatal(err) } ...
golang sql连接池的实现方法详解
09-20
database/sql是golang的标准库之一，它提供了一系列接口方法，用于访问关系数据库。下面这篇文章主要给大家介绍了关于golang sql连接池用法的相关资料，文中通过示例代码介绍的非常详细，需要的朋友可以参考借鉴，下面来一起看看吧
go-sqlcipher：Golang SQLCipher驱动程序，符合内置的数据库sql接口并使用最新的sqlite3代码
02-05
go-sql密码 符合内置数据库/ sql接口并使用最新的sqlite3代码SQLCipher驱动程序。 注意：v2.0.1或更高版本是意外的发行版。 因此，没有太大的变化。 并且不提供v2功能。 描述 3.31.0 使用sqlcipher版本4.3.0 它的包装 sqlite3驱动程序，用于使用数据库/ sql进行安装。 SQLCipher是一个SQLite扩展，它提供256位AES数据库文件加密。 使用作为256位AES加密。 支持的Golang版本：请参见.travis.yml 升级 由于项目，更改了其加载PRAGMA变量的方式。 设置加密密钥将不再适用于现有数据库。
golang微服务源码笔记
07-26
13、用户web层服务（一）对应源码：https://blog.csdn.net/qq23001186/article/det
Go语言连接、操作MySQL数据库
weixin_42117918的博客
09-20 2707
1、下载 github.com包 golang的”database/sql”是操作数据库时常用的包，这个包定义了一些sql操作的接口，具体的实现还需要不同数据库的实现，mysql比较优秀的一个驱动是：github.com/go-sql-driver/mysql，在接口、驱动的设计上”database/sql”的实现非常优秀， 2、创建文件，导入包 在src目录下创建demo.go文件（用到多...
go database/sql包sql.Open不是长连接
JesusSlim的专栏
09-08 1701
sql.Open 不会创建连接 ，只会创建一个DB实例，同时会创建一个go程来管理该DB实例的一个连接池（是长连接，但不是在Open的时候创建）。 在调用Begin()取一个连接，回滚或者提交得时候归还。如果你直接使用时Exec()执行，则每次会从连接池里面取出一个连接，到Exec执行完毕的时候归还。可以通过参数来调节连接池的大小。 golang sql包已经做了并发处理，自己通过chann
MySQL数据库
钻石星辰的专栏
04-27 356
安装mysql驱动包 连接mysql数据库 创建数据表 数据表插入数据 查询单条数据 查询多条数据 删除数据 清空数据表
database/sql库
qq_34893654的博客
02-27 699
是 Go 语言中一个标准库，用于处理关系型数据库的操作。它是一个轻量级的 SQL 数据库抽象，提供了一些基本的接口，包括连接、查询、事务等。使用 SQL 驱动程序的方式连接不同的数据库，让我们可以使用统一的 API，而不用考虑底层数据库驱动的差异性。连接数据库使用连接数据库通常需要先安装相应的驱动程序，例如 MySQL、PostgreSQL 等，然后使用sql.Open()函数打开一个数据库连接。sql.Open()函数的第一个参数是驱动程序名称，第二个参数是连接字符串。连接字符串中的。
Golang database/sql 学习
engchina的专栏
12-10 2415
Golang database/sql 学习
Golang流利SQL生成-Golang开发
05-26
sqrl-松鼠的无脂肪版本-Go的流畅SQL生成器松鼠的非线程安全分支。 同样方便的蓬松助手，但删除了多余的字母:) import“ github.com/elgris/sqrl”需要Go 1.8和更高的sqrl-无脂版本的松鼠-Go的流畅SQL生成器，用于...
golang的学习笔记
04-21
golang笔记
第六十二章 SQL命令 OPEN
yaoxin521123的博客
11-01 833
文章目录 第六十二章 SQL命令 OPEN大纲参数描述示例 第六十二章 SQL命令 OPEN 打开游标。 大纲 OPEN cursor-name 参数 cursor-name - 游标的名称，已经声明过了。 游标名称是在DECLARE语句中指定的。 游标名称区分大小写。 描述 OPEN语句根据游标的DECLARE语句中指定的参数打开游标。 一旦打开，就可以获取游标。 打开的游标必须关闭。 试图打开未声明的游标会出现SQLCODE -52错误。 试图打开已经打开的游标会导致SQLCODE -101错
05-OPEN SQL
qq_45367579的博客
08-10 460
SQL（ Structured Query Language ） 结构化查询语言 用于定义、创建、读取数据库表数据 Native SQL（本地SQL） 每种关系型数据库都有其对应的SQL，是数据库相关的 不同的SAP系统可能使用各种不 同的数据库，使用本地SQL的 ABAP 程序无法适应所有的 SAP 系统 可直接对数据库表进行修改删除等，有一定安全风险 能实现一些OpenSQL无法实现的功能 Open SQL（开放SQL） SAP 为ABAP定义的数据库无关的 SQL标准 在ABAP程序运行时由系统动态的
SQL openxml用法
jack15850798154的专栏
03-01 7775
                                                                              openxml用法2008-11-06 15:43 OPENXML 通过 XML 文档提供行集视图。由于 OPENXML 是行集提供程序，因此可在会出现行集提供程序（如表、视图或 OPENROWSET 函数）
关于Golang中database/sql包的学习笔记
weixin_34130389的博客
07-30 334
因为最近在学习Go，所以找了revel这个框架来学习，感觉和php的面向对象有很大不同。revel没有提供db mapping的组件，所以在github上搜了很多ORM来学习，在jmoiron/sqlx中发现了一篇比较详细介绍database/sql这个包的文章，拿来和大家分享。本文并不是按字句的翻译，如果哪里表述不清楚建议阅读原文...
golang 操作MySQL
wtt234的专栏
05-05 1400
通常一个事务对应一个完整的业务(例如银行账户转账业务，该业务就是一个最小的工作单元)，同时这个完整的业务需要执行多次的DML(insert、update、delete)语句共同联合完成。QueryRow总是返回非nil的值，直到返回值的Scan方法被调用时，才会返回被延迟的错误。Go语言中的database/sql包提供了保证SQL或类SQL数据库的泛用接口，并不提供具体的数据库驱动。Exec执行一次命令（包括查询、删除、更新、插入等），返回的Result是对已执行的SQL命令的总结。
golang操作mysql
janthinasnail的博客
09-01 641
1、创建person表 CREATE TABLE `person` ( `user_id` int(11) NOT NULL AUTO_INCREMENT, `username` varchar(260) DEFAULT NULL, `sex` varchar(260) DEFAULT NULL, `email` varchar(260) DEFAULT NULL, PRIMARY KEY (`user_id`) ) ENGINE=InnoDB DEFAULT CHARSET=ut.
channel源代码实现
热门推荐
u014763610的博客
12-08 4万+
channel实现方式 场景 hmap为struct，使用pointer 创建channel 往channel里面发送数据 有缓存 无缓存 有接收者 无接受者 从channel里面读取数据 有缓存 无缓存 有数据 无数据 关闭channel type hchan struct { dataqsiz uint // size of the circular q...
golang sqlserver
最新发布
03-22
Go语言中可以使用第三方库来连接和操作SQL Server数据库。常用的库有"database/sql"和"go-mssqldb"。 1. 使用"database/sql"库连接SQL Server数据库的步骤如下： - 导入库：`import "database/sql"` - 打开数据库连接：`db, err := sql.Open("mssql", "server=服务器地址;user id=用户名;password=密码;database=数据库名")` - 检查连接错误：`if err != nil { // 处理错误 }` - 执行SQL查询：`rows, err := db.Query("SELECT * FROM 表名")` - 处理查询结果：`for rows.Next() { // 处理每一行数据 }` - 关闭数据库连接：`db.Close()` 2. 使用"go-mssqldb"库连接SQL Server数据库的步骤如下： - 导入库：`import _ "github.com/denisenkom/go-mssqldb"` - 打开数据库连接：`connString := "server=服务器地址;user id=用户名;password=密码;database=数据库名"`，然后使用`sql.Open("mssql", connString)`打开连接 - 检查连接错误：`if err != nil { // 处理错误 }` - 执行SQL查询：`rows, err := db.Query("SELECT * FROM 表名")` - 处理查询结果：`for rows.Next() { // 处理每一行数据 }` - 关闭数据库连接：`db.Close()` 注意：在实际使用中，还需要处理错误、参数绑定、事务等操作。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值