PostgreSQL数据库连接池DBUtils.PooledDB

DBUtils 是一套用于管理数据库连接池的包，为高频度高并发的数据库访问提供更好的性能，可以自动管理连接对象的创建和释放。最常用的两个外部接口是 PersistentDB 和 PooledDB，前者提供了单个线程专用的数据库连接池，后者则是进程内所有线程共享的数据库连接池。PooledDB相对于PersistentDB可以提供相对来说平均连接时间比较短的管理方式。

这里主要介绍PooledDB。

DBUtils安装：pip install DBUtils

不用连接池的PostgreSQL连接方法：

import psycopg2
conn= psycopg2.connect(host='localhost',user='root',passwd='pwd',db='myDB',port='5432')  
cur=conn.cursor()
SQL="select * from table1"
r=cur.execute(SQL)
r=cur.fetchall()
cur.close()
conn.close()

用连接池后的PostgreSQL连接方法：

import psycopg2
from DBUtils.PooledDB import PooledDB
from conf.GetConfParams import GetConfParams

ConfParams = GetConfParams()
logger = ConfParams.logger

class DataBase():
    #连接
    def __init__(self, match):
        try:
            self.psycopg_pool = PooledDB(psycopg2, mincached=5, blocking=True, user=ConfParams.USER,
                                    password=ConfParams.PWD, database=match, host=ConfParams.HOST,
                                    port=ConfParams.PORT)
            self.connection = self.psycopg_pool.connection()
            self.cursor = self.connection.cursor()
        except Exception as e:
            logger.error('数据库连接错误:%s'%e)
            raise

    #取单条数据
    def queryOne(self,sql):
        cur = self.cursor
        cur.execute(sql)
        return cur.fetchone()


if __name__=='__main__':
    DB = DataBase(match='')
    sql= "select * from table1"
    result = DB.queryOne(sql)
    print(result)

PooledDB的参数：

1. mincached，最少的空闲连接数，如果空闲连接数小于这个数，pool会创建一个新的连接

2. maxcached，最大的空闲连接数，如果空闲连接数大于这个数，pool会关闭空闲连接

3. maxconnections，最大的连接数

4. blocking，当连接数达到最大的连接数时，在请求连接的时候，如果这个值是True，请求连接的程序会一直等待，直到当前连接数小于最大连接数，如果这个值是False，会报错

5. maxshared 当连接数达到这个数，新请求的连接会分享已经分配出去的连接

其中database 是数据库名

在uwsgi中，每个http请求都会分发给一个进程，连接池中配置的连接数都是一个进程为单位的（即上面的最大连接数，都是在一个进程中的连接数），而如果业务中，一个http请求中需要的sql连接数不是很多的话（其实大多数都只需要创建一个连接），配置的连接数配置都不需要太大。

连接池对性能的提升表现在：

1、在程序创建连接的时候，可以从一个空闲的连接中获取，不需要重新初始化连接，提升获取连接的速度

2、关闭连接的时候，把连接放回连接池，而不是真正的关闭，所以可以减少频繁地打开和关闭连

DBUtils下载地址：https://pypi.python.org/pypi/DBUtils/

DBUtils官方文档：https://cito.github.io/DBUtils/UsersGuide.html

参考：https://www.cnblogs.com/Xjng/p/3437694.html