16 Python 数据库
By Kevin Song
- 16-01 使用SQLite
- 16-02 使用MySQL
- 16-03 使用SQLAlchemy
付费的商用数据库:
- Oracle,典型的高富帅
- SQL Server,微软自家产品,Windows定制专款
- DB2,IBM的产品,听起来挺高端
- Sybase,曾经跟微软是好基友,后来关系破裂,现在家境惨淡
免费的开源数据库:
- MySQL,大家都在用,一般错不了
- PostgreSQL,学术气息有点重,其实挺不错,但知名度没有MySQL高
- sqlite,嵌入式数据库,适合桌面和移动应用
16-01 使用SQLite
SQLite的驱动内置在Python标准库中,所以可以直接操作SQLite数据库
特点
- 轻量级
- 可嵌入:体积很小,经常被集成到各种应用程序中(在iOS和Android的App中都可以集成)
- 不能承受高并发访问:适合桌面和移动应用
# 导入SQLite驱动:
>>> import sqlite3
# 连接到SQLite数据库
# 数据库文件是test.db
# 如果文件不存在,会自动在当前目录创建:
>>> conn = sqlite3.connect('test.db')
# 创建一个Cursor:
>>> cursor = conn.cursor()
# 执行一条SQL语句,创建user表:
>>> cursor.execute('create table user (id varchar(20) primary key, name varchar(20))')
<sqlite3.Cursor object at 0x10f8aa260>
# 继续执行一条SQL语句,插入一条记录:
>>> cursor.execute('insert into user (id, name) values (\'1\', \'Michael\')')
<sqlite3.Cursor object at 0x10f8aa260>
# 通过rowcount获得插入的行数:
>>> cursor.rowcount
1
# 关闭Cursor:
>>> cursor.close()
# 提交事务:
>>> conn.commit()
# 关闭Connection:
>>> conn.close()
查询记录:
>>> conn = sqlite3.connect('test.db')
>>> cursor = conn.cursor()
# 执行查询语句:
>>> cursor.execute('select * from user where id=?', ('1',))
<sqlite3.Cursor object at 0x10f8aa340>
# 获得查询结果集:
>>> values = cursor.fetchall()
>>> values
[('1', 'Michael')]
>>> cursor.close()
>>> conn.close()
- 使用Cursor对象执行insert,update,delete语句时,执行结果由rowcount返回影响的行数,就可以拿到执行结果。
- 使用Cursor对象执行select语句时,通过featchall()可以拿到结果集。结果集是一个list,每个元素都是一个tuple,对应一行记录
如果SQL语句带有参数,那么需要把参数按照位置传递给execute()方法,有几个?占位符就必须对应几个参数,例如:
cursor.execute('select * from user where name=? and pwd=?', ('abc', 'password'))
16-02 使用MySQL
Web世界中使用最广泛的数据库服务器
- 安装MySQL
- 输入root用户的口令(记不住就设置为password)
- 安装MySQL驱动:mysql-connector-python
$ pip install mysql-connector-python --allow-external mysql-connector-python
如果安装失败,可以试另一个驱动:
$ pip install mysql-connector
Python连接到MySQL服务器的test数据库:
# 导入MySQL驱动:
>>> import mysql.connector
# 注意把password设为你的root口令:
>>> conn = mysql.connector.connect(user='root', password='password', database='test')
>>> cursor = conn.cursor()
# 创建user表:
>>> cursor.execute('create table user (id varchar(20) primary key, name varchar(20))')
# 插入一行记录,注意MySQL的占位符是%s:
>>> cursor.execute('insert into user (id, name) values (%s, %s)', ['1', 'Michael'])
>>> cursor.rowcount
1
# 提交事务:
>>> conn.commit()
>>> cursor.close()
# 运行查询:
>>> cursor = conn.cursor()
>>> cursor.execute('select * from user where id = %s', ('1',))
>>> values = cursor.fetchall()
>>> values
[('1', 'Michael')]
# 关闭Cursor和Connection:
>>> cursor.close()
True
>>> conn.close()
操作MySQL的数据库代码和SQLite类似
pymysql 版本
import pymysql
#建立连接
conn = pymysql.connect(host='10.104.120.24', user='root', password='123', database='test')
cursor = conn.cursor()
#创建表
cursor.execute('create table user (id varchar(20) primary key, name varchar(20))')
#插入数据
cursor.execute('insert into user (id, name) values (%s, %s)', ['1', 'Michael'])
#cursor.rowcount
#提交事务
conn.commit()
cursor.close()
cursor = conn.cursor()
#查询数据
cursor.execute('select * from user where id = %s', ('1',))
values = cursor.fetchall()
print(values)
#查询Mysql版本
cursor.execute('select version()')
v = cursor.fetchall()
print ("Database version : %s " % v)
cursor.close()
conn.close()
16-03 使用SQLAlchemy
ORM技术(Object-Relational Mapping)
数据库表是一个二维表
- 一个list表示多行
- list的每一个元素是tuple,表示一行记录
[
('1', 'Michael'),
('2', 'Bob'),
('3', 'Adam')
]
缺点:tuple表示一行很难看出表的结构
解决方案:关系数据库的表结构映射到对象上 - ORM(Object-Relational Mapping)
class User(object):
def __init__(self, id, name):
self.id = id
self.name = name
[
User('1', 'Michael'),
User('2', 'Bob'),
User('3', 'Adam')
]
SQLAlchemy
是一个ORM框架
安装SQLAlchemy:
$ pip install sqlalchemy
第一步,导入SQLAlchemy,并初始化DBSession:
# 导入:
from sqlalchemy import Column, String, create_engine
from sqlalchemy.orm import sessionmaker
from sqlalchemy.ext.declarative import declarative_base
# 创建对象的基类:
Base = declarative_base()
# 定义User对象:
class User(Base):
# 表的名字:
__tablename__ = 'user'
# 表的结构:
id = Column(String(20), primary_key=True)
name = Column(String(20))
# 初始化数据库连接:
engine = create_engine('mysql+mysqlconnector://root:password@localhost:3306/test')
# 创建DBSession类型:
DBSession = sessionmaker(bind=engine)
如果有多个表,就继续定义其他class,例如School:
class School(Base):
__tablename__ = 'school'
id = ...
name = ...
create_engine()用来初始化数据库连接。SQLAlchemy用一个字符串表示连接信息:
'数据库类型+数据库驱动名称://用户名:口令@机器地址:端口号/数据库名'
向数据库表中添加一行记录,可以视为添加一个User对象:
# 创建session对象:
session = DBSession()
# 创建新User对象:
new_user = User(id='5', name='Bob')
# 添加到session:
session.add(new_user)
# 提交即保存到数据库:
session.commit()
# 关闭session:
session.close()
查询数据,不再是tuple,而是User对象
# 创建Session:
session = DBSession()
# 创建Query查询,filter是where条件,最后调用one()返回唯一行,如果调用all()则返回所有行:
user = session.query(User).filter(User.id=='5').one()
# 打印类型和对象的name属性:
print('type:', type(user))
print('name:', user.name)
# 关闭Session:
session.close()
如果一个User拥有多个Book,就可以定义一对多关系如下:
class User(Base):
__tablename__ = 'user'
id = Column(String(20), primary_key=True)
name = Column(String(20))
# 一对多:
books = relationship('Book')
class Book(Base):
__tablename__ = 'book'
id = Column(String(20), primary_key=True)
name = Column(String(20))
# “多”的一方的book表是通过外键关联到user表的:
user_id = Column(String(20), ForeignKey('user.id'))
查询一个User对象时,该对象的books属性将返回一个包含若干个Book对象的list