python操作数据库（pymysql 和 SQLAchemy）

最新推荐文章于 2024-07-21 03:47:19 发布
最新推荐文章于 2024-07-21 03:47:19 发布
阅读量947 收藏 3
点赞数
分类专栏： Python

本篇对于Python操作MySQL主要使用两种方式：

  • 原生模块 pymsql
  • ORM框架 SQLAchemy

pymsql

pymsql是Python中操作MySQL的模块，其使用方法和MySQLdb几乎相同。

下载安装

1
pip3 install pymysql

使用操作

1、执行SQL

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
#!/usr/bin/env python
# -*- coding:utf-8 -*-
import pymysql
  
# 创建连接
conn = pymysql. connect (host= '127.0.0.1' , port=3306,  user = 'root' , passwd= '123' , db= 't1' )
# 创建游标
cursor  = conn. cursor ()
  
# 执行SQL，并返回收影响行数
effect_row =  cursor . execute ( "update hosts set host = '1.1.1.2'" )
  
# 执行SQL，并返回受影响行数
#effect_row =  cursor . execute ( "update hosts set host = '1.1.1.2' where nid > %s" , (1,))
  
# 执行SQL，并返回受影响行数
#effect_row =  cursor .executemany( "insert into hosts(host,color_id)values(%s,%s)" , [( "1.1.1.11" ,1),( "1.1.1.11" ,2)])
  
  
# 提交，不然无法保存新建或者修改的数据
conn. commit ()
  
# 关闭游标
cursor . close ()
# 关闭连接
conn. close ()

2、获取新创建数据自增ID

1
2
3
4
5
6
7
8
9
10
11
12
13
#!/usr/bin/env python
# -*- coding:utf-8 -*-
import pymysql
  
conn = pymysql. connect (host= '127.0.0.1' , port=3306,  user = 'root' , passwd= '123' , db= 't1' )
cursor  = conn. cursor ()
cursor .executemany( "insert into hosts(host,color_id)values(%s,%s)" , [( "1.1.1.11" ,1),( "1.1.1.11" ,2)])
conn. commit ()
cursor . close ()
conn. close ()
  
# 获取最新自增ID
new_id =  cursor .lastrowid

3、获取查询数据

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
#!/usr/bin/env python
# -*- coding:utf-8 -*-
import pymysql
  
conn = pymysql. connect (host= '127.0.0.1' , port=3306,  user = 'root' , passwd= '123' , db= 't1' )
cursor  = conn. cursor ()
cursor . execute ( "select * from hosts" )
  
# 获取第一行数据
row_1 =  cursor .fetchone()
  
# 获取前n行数据
# row_2 =  cursor .fetchmany(3)
# 获取所有数据
# row_3 =  cursor .fetchall()
  
conn. commit ()
cursor . close ()
conn. close ()

注：在fetch数据时按照顺序进行，可以使用cursor.scroll(num,mode)来移动游标位置，如：

  • cursor.scroll(1,mode='relative')  # 相对当前位置移动
  • cursor.scroll(2,mode='absolute') # 相对绝对位置移动

4、fetch数据类型

　　关于默认获取的数据是元祖类型，如果想要或者字典类型的数据，即：

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
#!/usr/bin/env python
# -*- coding:utf-8 -*-
import pymysql
  
conn = pymysql. connect (host= '127.0.0.1' , port=3306,  user = 'root' , passwd= '123' , db= 't1' )
  
# 游标设置为字典类型
cursor  = conn. cursor ( cursor =pymysql.cursors.DictCursor)
r =  cursor . execute ( "call p1()" )
  
result =  cursor .fetchone()
  
conn. commit ()
cursor . close ()
conn. close ()
复制代码 
    作业：
        参考表结构：
            用户类型

            用户信息

            权限

            用户类型&权限
        功能：

            # 登陆、注册、找回密码
            # 用户管理
            # 用户类型
            # 权限管理
            # 分配权限

        特别的：程序仅一个可执行文件
复制代码

SQLAchemy

SQLAlchemy是Python编程语言下的一款ORM框架，该框架建立在数据库API之上，使用关系对象映射进行数据库操作，简言之便是：将对象转换成SQL，然后使用数据API执行SQL并获取执行结果。

安装：

1
pip3 install SQLAlchemy

 

SQLAlchemy本身无法操作数据库，其必须以来pymsql等第三方插件，Dialect用于和数据API进行交流，根据配置文件的不同调用不同的数据库API，从而实现对数据库的操作，如：

1
2
3
4
5
6
7
8
9
10
11
12
13
MySQL-Python
     mysql+mysqldb://< user >:< password >@<host>[:<port>]/<dbname>
   
pymysql
     mysql+pymysql://<username>:< password >@<host>/<dbname>[?<options>]
   
MySQL-Connector
     mysql+mysqlconnector://< user >:< password >@<host>[:<port>]/<dbname>
   
cx_Oracle
     oracle+cx_oracle:// user :pass@host:port/dbname[? key =value& key =value...]
   
更多详见：http://docs.sqlalchemy.org/en/latest/dialects/ index .html

一、内部处理

使用 Engine/ConnectionPooling/Dialect 进行数据库操作，Engine使用ConnectionPooling连接数据库，然后再通过Dialect执行SQL语句。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
#!/usr/bin/env python
# -*- coding:utf-8 -*-
from  sqlalchemy import create_engine
  
  
engine = create_engine( "mysql+pymysql://root:123@127.0.0.1:3306/t1" , max_overflow=5)
  
# 执行SQL
# cur = engine. execute (
#      "INSERT INTO hosts (host, color_id) VALUES ('1.1.1.22', 3)"
# )
  
# 新插入行自增ID
# cur.lastrowid
  
# 执行SQL
# cur = engine. execute (
#      "INSERT INTO hosts (host, color_id) VALUES(%s, %s)" ,[( '1.1.1.22' , 3),( '1.1.1.221' , 3),]
# )
  
  
# 执行SQL
# cur = engine. execute (
#      "INSERT INTO hosts (host, color_id) VALUES (%(host)s, %(color_id)s)" ,
#     host= '1.1.1.99' , color_id=3
# )
  
# 执行SQL
# cur = engine. execute ( 'select * from hosts' )
# 获取第一行数据
# cur.fetchone()
# 获取第n行数据
# cur.fetchmany(3)
# 获取所有数据
# cur.fetchall()

二、ORM功能使用

使用 ORM/Schema Type/SQL Expression Language/Engine/ConnectionPooling/Dialect 所有组件对数据进行操作。根据类创建对象，对象转换成SQL，执行SQL。

1、创建表

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
#!/usr/bin/env python
# -*- coding:utf-8 -*-
from  sqlalchemy.ext.declarative import declarative_base
from  sqlalchemy import  Column ,  Integer , String, ForeignKey, UniqueConstraint,  Index
from  sqlalchemy.orm import sessionmaker, relationship
from  sqlalchemy import create_engine
 
engine = create_engine( "mysql+pymysql://root:123@127.0.0.1:3306/t1" , max_overflow=5)
 
Base = declarative_base()
 
# 创建单表
class Users(Base):
     __tablename__ =  'users'
     id =  Column ( Integer , primary_key= True )
     name  =  Column (String(32))
     extra =  Column (String(16))
 
     __table_args__ = (
     UniqueConstraint( 'id' ,  'name' ,  name = 'uix_id_name' ),
         Index ( 'ix_id_name' ,  'name' ,  'extra' ),
     )
 
 
# 一对多
class Favor(Base):
     __tablename__ =  'favor'
     nid =  Column ( Integer , primary_key= True )
     caption =  Column (String(50),  default = 'red' ,  unique = True )
 
 
class Person(Base):
     __tablename__ =  'person'
     nid =  Column ( Integer , primary_key= True )
     name  =  Column (String(32),  index = True , nullable= True )
     favor_id =  Column ( Integer , ForeignKey( "favor.nid" ))
 
 
# 多对多
class  Group (Base):
     __tablename__ =  'group'
     id =  Column ( Integer , primary_key= True )
     name  =  Column (String(64),  unique = True , nullable= False )
     port =  Column ( Integer ,  default =22)
 
 
class Server(Base):
     __tablename__ =  'server'
 
     id =  Column ( Integer , primary_key= True , autoincrement= True )
     hostname =  Column (String(64),  unique = True , nullable= False )
 
 
class ServerToGroup(Base):
     __tablename__ =  'servertogroup'
     nid =  Column ( Integer , primary_key= True , autoincrement= True )
     server_id =  Column ( Integer , ForeignKey( 'server.id' ))
     group_id =  Column ( Integer , ForeignKey( 'group.id' ))
 
 
def init_db():
     Base.metadata.create_all(engine)
 
 
def drop_db():
     Base.metadata.drop_all(engine)

注：设置外检的另一种方式 ForeignKeyConstraint(['other_id'], ['othertable.other_id'])

2、操作表

复制代码 
#!/usr/bin/env python
# -*- coding:utf-8 -*-
from sqlalchemy.ext.declarative import declarative_base
from sqlalchemy import Column, Integer, String, ForeignKey, UniqueConstraint, Index
from sqlalchemy.orm import sessionmaker, relationship
from sqlalchemy import create_engine

engine = create_engine("mysql+pymysql://root:123@127.0.0.1:3306/t1", max_overflow=5)

Base = declarative_base()

# 创建单表
class Users(Base):
    __tablename__ = 'users'
    id = Column(Integer, primary_key=True)
    name = Column(String(32))
    extra = Column(String(16))

    __table_args__ = (
    UniqueConstraint('id', 'name', name='uix_id_name'),
        Index('ix_id_name', 'name', 'extra'),
    )

    def __repr__(self):
        return "%s-%s" %(self.id, self.name)

# 一对多
class Favor(Base):
    __tablename__ = 'favor'
    nid = Column(Integer, primary_key=True)
    caption = Column(String(50), default='red', unique=True)

    def __repr__(self):
        return "%s-%s" %(self.nid, self.caption)

class Person(Base):
    __tablename__ = 'person'
    nid = Column(Integer, primary_key=True)
    name = Column(String(32), index=True, nullable=True)
    favor_id = Column(Integer, ForeignKey("favor.nid"))
    # 与生成表结构无关，仅用于查询方便
    favor = relationship("Favor", backref='pers')

# 多对多
class ServerToGroup(Base):
    __tablename__ = 'servertogroup'
    nid = Column(Integer, primary_key=True, autoincrement=True)
    server_id = Column(Integer, ForeignKey('server.id'))
    group_id = Column(Integer, ForeignKey('group.id'))
    group = relationship("Group", backref='s2g')
    server = relationship("Server", backref='s2g')

class Group(Base):
    __tablename__ = 'group'
    id = Column(Integer, primary_key=True)
    name = Column(String(64), unique=True, nullable=False)
    port = Column(Integer, default=22)
    # group = relationship('Group',secondary=ServerToGroup,backref='host_list')


class Server(Base):
    __tablename__ = 'server'

    id = Column(Integer, primary_key=True, autoincrement=True)
    hostname = Column(String(64), unique=True, nullable=False)




def init_db():
    Base.metadata.create_all(engine)


def drop_db():
    Base.metadata.drop_all(engine)


Session = sessionmaker(bind=engine)
session = Session()
复制代码
  • 增
    复制代码 
    obj = Users(name="alex0", extra='sb')
session.add(obj)
session.add_all([
    Users(name="alex1", extra='sb'),
    Users(name="alex2", extra='sb'),
])
session.commit()
    复制代码
  • 删
    session.query(Users).filter(Users.id > 2).delete()
session.commit()
  • 改
    session.query(Users).filter(Users.id > 2).update({"name" : "099"})
session.query(Users).filter(Users.id > 2).update({Users.name: Users.name + "099"}, synchronize_session=False)
session.query(Users).filter(Users.id > 2).update({"num": Users.num + 1}, synchronize_session="evaluate")
session.commit()
  • 查
    复制代码 
    ret = session.query(Users).all()
ret = session.query(Users.name, Users.extra).all()
ret = session.query(Users).filter_by(name='alex').all()
ret = session.query(Users).filter_by(name='alex').first()

ret = session.query(Users).filter(text("id<:value and name=:name")).params(value=224, name='fred').order_by(User.id).all()

ret = session.query(Users).from_statement(text("SELECT * FROM users where name=:name")).params(name='ed').all()
    复制代码
  • 其他
    复制代码 
    #　条件
ret = session.query(Users).filter_by(name='alex').all()
ret = session.query(Users).filter(Users.id > 1, Users.name == 'eric').all()
ret = session.query(Users).filter(Users.id.between(1, 3), Users.name == 'eric').all()
ret = session.query(Users).filter(Users.id.in_([1,3,4])).all()
ret = session.query(Users).filter(~Users.id.in_([1,3,4])).all()
ret = session.query(Users).filter(Users.id.in_(session.query(Users.id).filter_by(name='eric'))).all()
from sqlalchemy import and_, or_
ret = session.query(Users).filter(and_(Users.id > 3, Users.name == 'eric')).all()
ret = session.query(Users).filter(or_(Users.id < 2, Users.name == 'eric')).all()
ret = session.query(Users).filter(
    or_(
        Users.id < 2,
        and_(Users.name == 'eric', Users.id > 3),
        Users.extra != ""
    )).all()


# 通配符
ret = session.query(Users).filter(Users.name.like('e%')).all()
ret = session.query(Users).filter(~Users.name.like('e%')).all()

# 限制
ret = session.query(Users)[1:2]

# 排序
ret = session.query(Users).order_by(Users.name.desc()).all()
ret = session.query(Users).order_by(Users.name.desc(), Users.id.asc()).all()

# 分组
from sqlalchemy.sql import func

ret = session.query(Users).group_by(Users.extra).all()
ret = session.query(
    func.max(Users.id),
    func.sum(Users.id),
    func.min(Users.id)).group_by(Users.name).all()

ret = session.query(
    func.max(Users.id),
    func.sum(Users.id),
    func.min(Users.id)).group_by(Users.name).having(func.min(Users.id) >2).all()

# 连表

ret = session.query(Users, Favor).filter(Users.id == Favor.nid).all()

ret = session.query(Person).join(Favor).all()

ret = session.query(Person).join(Favor, isouter=True).all()


# 组合
q1 = session.query(Users.name).filter(Users.id > 2)
q2 = session.query(Favor.caption).filter(Favor.nid < 2)
ret = q1.union(q2).all()

q1 = session.query(Users.name).filter(Users.id > 2)
q2 = session.query(Favor.caption).filter(Favor.nid < 2)
ret = q1.union_all(q2).all()
    复制代码

更多功能参见文档，猛击这里下载PDF

 

作者： 武沛齐 
出处： http://www.cnblogs.com/wupeiqi/ 
本文版权归作者和博客园共有，欢迎转载，但未经作者同意必须保留此段声明，且在文章页面明显位置给出原文连接。
opera92
关注
  • 0
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Python基于mysql实现学生管理系统
12-25
本篇文章主要介绍了Python基于mysql实现学生管理系统，分享给大家，具体如下： import pymysql import re def idinput(string): ID = input(string) pattern = re.compile("^\d{1,3}$") while not re.match(pattern, ID): ID = input("请输入1-3位整数:") return ID def appendStudentInfo(): ID =idinput("请输入学生学号：") db=pymysql.connect(host="127.0.0
MySQL(三)
LWL_WLiang的博客
06-10 374
pymsql pymsql是Python中操作MySQL的模块，其使用方法和MySQLdb几乎相同。 下载安装 1 pip3 install pymysql 使用操作 1、执行SQL 1 2 3 4 5 6 7
python MySQLdb fetchall
最新发布
weixin_40668663的博客
07-21 17
python相关学习资料：https://edu.51cto.com/video/3502.htmlhttps://edu.51cto.com/video/3832.htmlhttps://edu.51cto.com/video/1158.htmlPython MySQLdb fetchall 详解 在Python中...
python-管理MySQL数据库作业
weixin_50108437的博客
09-21 492
作业1 import pymysql class The_book: def __init__(self,database_name): self.database_name = database_name def conn_db(self): # 连接数据库 return pymysql.connect('127.0.0.1', 'root', 'root', self.database_name, charset='utf8')
python之sqlalchemy详解
没有撤退可言.
03-25 1万+
python之sqlalchemy详解 SQLAlchemy连接数据库 可以使用ORM框架操作数据库 ORM框架 = object relationship mappiy 框架 学习前提（软件） mysql、pymysql（或者MySQLdb）、SQLAlchemy SQLAlchemy连接数据库 步骤 首先导入sqlalchemy.create_engine 输入配置信息（服务...
Python之路-python(mysql介绍和安装、pymysql、ORM sqlachemy)
weixin_30823833的博客
10-27 180
本节内容 1、数据库介绍 2、mysql管理 3、mysql数据类型 4、常用mysql命令 　　创建数据库 　　外键 　　增删改查表 5、事务 6、索引 7、python 操作mysql 8、ORM sqlachemy学习 1、数据库介绍 什么是数据库？ 数据库（Database）是按照数据结构来组织、存储和管理数据的仓库，每个数据库都有一个或多个不同的API...
详解Python的数据库操作（pymysql）
09-19
注意，在远程操作数据库时，如果遇到连接问题，可能需要检查服务器上的防火墙设置是否允许外部访问。例如，在CentOS 7上，可以通过关闭防火墙来解决连接问题： ```bash sudo systemctl stop firewalld ``` #### 三...
Python3数据库操作包pymysql的操作方法
09-20
Python3中的pymysql是一个用于连接MySQL数据库的第三方库，它提供了类似于Python DB-API的接口，使得开发者能够方便地进行数据库操作。在本文中，我们将详细探讨pymysql的使用方法，包括如何连接数据库、执行SQL语句...
Python 中使用 PyMySQL模块操作数据库的方法
09-09
在Python中，当我们需要操作MySQL数据库时，PyMySQL是一个重要的工具。这个模块为Python提供了与MySQL数据库交互的能力，尤其在Python 3.x环境下，因为MySQLdb模块不支持Python 3.x，PyMySQL成为了首选。本篇文章将...
python PyMySQL 数据库操作
05-22
使用python完成： 公司新闻表（ID，新闻标题，发布时间，点击次数） a.一次性添加2条记录（文件一） b.根据用户输入的标题删除记录（文件二） """ # 引入模块 from Ab import Ab_MySQL # 实例化对象 A1 = Ab_MySQL...
Python 解析pymysql模块操作数据库的方法
09-08
Python中的pymysql模块是用于连接和操作MySQL数据库的一个第三方库。它提供了丰富的API，使得在Python中进行数据库交互变得更加方便。以下是对pymysql模块操作数据库的详细讲解： 1. **建立数据库连接** 使用`...
Python Sqlalchemy如何实现select for update
12-16
sqlalchemy 对于行级锁有两种实现方式，with_lockmode(self, mode): 和 with_for_update(self, read=False, nowait=False, of=None)，前者在sqlalchemy 0.9.0 被废弃，用后者代替。所以我们使用with_for_update ! 看下函数的定义： @_generative() def with_for_update(self, read=False, nowait=False, of=None): """return a new :class:`.Query` with the sp
python操作之SQLAchemy
Mr_zhang的博客
03-05 596
QLAlchemy是Python编程语言下的一款ORM框架，该框架建立在数据库API之上，使用关系对象映射进行数据库操作，简言之便是：将对象转换成SQL，然后使用数据API执行SQL并获取执行结果。安装：pip3 install SQLALchemySQLAlchemy本身无法操作数据库，其必须以来pymsql等第三方插件，Dialect用于和数据API进行交流，根据配置文件的不同调用不同的数据库...
Python 访问 MySQL 的正确姿势
Python作业辅导员 - 天元浪子
01-06 1万+
Py2 时代，访问 MySQL 数据库的模块除了 PyMySQL 和 MySQL-python 之外，还有以速度见长的 Umysql，以及非常小众的 Oursql 模块。进入了 Py3 时代之后，PyMySQL 与时俱进，顺利升级到 Py3 版本， MySQL-python 则被它的一个 Py3 分支——mysqlclient 取代，而 Umysql 和 Oursql 则停留在了属于它们的那个时代...
sqlalchemy在python中的使用(关于查询)二
水痕
01-03 1592
在上一小节中介绍了sqlalchemy的安装及基本的使用,本小节介绍查询功能 一、查询结果 1、all()查询全部数据 from sqlalchemy_demo.connect import dbSession from sqlalchemy_demo.modules.user_module import UserModule def query_user(): rows = d...
数据库操作神器——SQLAchemy，DBUtils
General_zy的博客
11-07 279
SQLAlchemy是Python编程语言下的一款ORM框架，该框架建立在数据库API之上，使用关系对象映射进行数据库操作，简言之便是：将对象转换成SQL，然后使用数据API执行SQL并获取执行结果。 SQLAlchemy本身无法操作数据库，其必须以来pymsql等第三方插件，Dialect用于和数据API进行交流，根据配置文件的不同调用不同的数据库API，从而实现对数据库的操作，如： 使用 Engine/ConnectionPooling/Dialect 进行数据库操作，Engine使用Connect
SQLAlchemy
weixin_43079274的博客
05-04 451
文章目录一、连接和初始化使用SQLAlchemy去连接数据库二、模型与数据库的映射将ORM模型映射到数据库中：三、SQLAlchemy常用数据类型四、Column常用参数五、数据的增删改查操作六、query可用参数七、filter过滤的总结八、数据库层面的外键约束外键约束有以下几项ORM层面的外键约束九、一对一十、一对多十一、多对多十二、ORM层面的外键约束十三、排序十四、limit、offset和切片十五、group_by与having查询SQLALchemy很多语法和原生sql高度一致group_by：
sqlalchemy update 更新
nongcunqq的博客
09-10 6476
#将dub中location字段V开头的值，site改为venlo v_list = session.query(Sites).filter(Sites.site=='dub',Sites.location.startswith('V')).all() for v in v_list: v.site = 'venlo' session.commit()
Flask-sqlalchemy增删改查之（更改数据）
热门推荐
li944254211的博客
10-28 1万+
Flask-sqlalchemy增删改查之（更改数据） 更新数据有两种方式 先查询, 再更新：对应SQL中的 先select, 再update 基于过滤条件的更新：对应SQL中的 update xx where xx = xx (也称为 update子查询 ) 1.先查询, 再更新 这种方式简单易懂, 操作步骤如下: 执行查询语句, 获取目标模型对象 对模型对象的属性进行赋值 (更新数据) 提交会话 代码示例： from flask import Flask from flask_sqlalchem
python操作数据库pymysql
03-16
PyMySQL是一个用于Python的MySQL数据库驱动程序，用于在Python程序中操作MySQL数据库。 安装：pip install PyMySQL 示例代码： ``` import pymysql # 连接数据库 conn = pymysql.connect(host='host_name', user=...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值