数据库连接池
标签(空格分隔): jdbc
数据库连接池的必要性
传统模式的问题
在使用开发基于数据库的web程序时,传统的模式基本是按以下步骤:
- 在主程序(如servlet、beans)中建立数据库连接
- 进行sql操作
- 断开数据库连接
这种模式开发,存在的问题:
普通的JDBC数据库连接使用 DriverManager 来获取,每次向数据库建立连接的时候都要将 Connection 加载到内存中,再验证用户名和密码(得花费0.05s~1s的时间)。需要数据库连接的时候,就向数据库要求一个,执行完成后再断开连接。这样的方式将会消耗大量的资源和时间。数据库的连接资源并没有得到很好的重复利用.若同时有几百人甚至几千人在线,频繁的进行数据库连接操作将占用很多的系统资源,严重的甚至会造成服务器的崩溃。
对于每一次数据库连接,使用完后都得断开。否则,如果程序出现异常而未能关闭,将会导致数据库系统中的内存泄漏,最终将导致重启数据库。
这种开发不能控制被创建的连接对象数,系统资源会被毫无顾及的分配出去,如连接过多,也可能导致内存泄漏,服务器崩溃。
数据库连接池
为了解决传统开发中的数据库连接问题,可以采用数据库连接池技术。
数据库连接池的基本思想就是为数据库连接建立一个“缓冲池”。预先在缓冲池中放入一定数量的连接,当需要建立数据库连接时,只需从“缓冲池”中取出一个,使用完毕之后再放回去。
数据库连接池负责分配、管理和释放数据库连接,它允许应用程序重复使用一个现有的数据库连接,而不是重新建立一个。
数据库连接池在初始化时将创建一定数量的数据库连接放到连接池中,这些数据库连接的数量是由最小数据库连接数来设定的。无论这些数据库连接是否被使用,连接池都将一直保证至少拥有这么多的连接数量。连接池的最大数据库连接数量限定了这个连接池能占有的最大连接数,当应用程序向连接池请求的连接数超过最大连接数量时,这些请求将被加入到等待队列中。
工作原理
两种开源的数据库连接池
JDBC 的数据库连接池使用 javax.sql.DataSource 来表示,DataSource 只是一个接口,该接口通常由服务器(Weblogic, WebSphere, Tomcat)提供实现,也有一些开源组织提供实现:
- DBCP 数据库连接池
- C3P0 数据库连接池
DataSource 通常被称为数据源,它包含连接池和连接池管理两个部分,习惯上也经常把 DataSource 称为连接池
DBCP 数据源
DBCP 是 Apache 软件基金组织下的开源连接池实现,该连接池依赖该组织下的另一个开源系统:Common-pool
如需使用该连接池实现,应在系统中增加如下两个 jar 文件:
Commons-dbcp.jar:连接池的实现
Commons-pool.jar:连接池实现的依赖库
Tomcat 的连接池正是采用该连接池来实现的。该数据库连接池既可以与应用服务器整合使用,也可由应用程序独立使用。
使用DBCP数据库连接池
使用DBCP数据库连接池步骤:
- 导入jar包(两个),依赖于Pooljar包
- 创建数据库连接池
- 为数据源实例指定必须的属性
- 从数据源中获取数据库连接
@Test
public void testDBCP() throws SQLException {
BasicDataSource dataSource = null;
//1. 创建DBCP数据源实例
dataSource = new BasicDataSource();
//2. 为数据源实例指定必须的属性
dataSource.setUsername("root");
dataSource.setPassword("1234");
dataSource.setUrl("jdbc:mysql://localhost:3306/tables");
dataSource.setDriverClassName("com.mysql.jdbc.Driver");
//3. 从数据源中获取数据库信息
Connection connection = dataSource.getConnection();
System.out.println(connection.getClass());
}
指定数据源的一些可选的属性:
//1. 指定数据库连接池中初始化连接数的个数
dataSource.setInitialSize(10);
//2. 指定最大的连接数:在数据库连接池中保存的最大的空闲连接的数量
dataSource.setMaxIdle(50);
//3. 指定最小的连接数:在数据库连接池中保存的最少的空闲连接的数量
dataSource.setMinIdle(5);
//4. 等待数据库连接池分配连接的最长时间,单位为毫秒,超过时间将抛出异常
dataSource.setMaxWaitMillis(1000*5);
使用工厂模式加载配置文件
- 加载dbcp的properties配置文件:配置文件中的键值对的键来自BasocDataSource的属性。
- 调用BasicDataSourceFactory的createDataSource方法创建DataSource实例
- 从DataSource实例中获取数据库连接
public void testDBCPWithDataSourceFactory() throws Exception {
Properties properties = new Properties();
InputStream inputStream = this.getClass().getClassLoader().getResourceAsStream("dbcp.properties");
properties.load(inputStream);
DataSource dataSource = BasicDataSourceFactory.createDataSource(properties);
System.out.println(dataSource.getConnection());
BasicDataSource basicDataSource = (BasicDataSource) dataSource;
System.out.println(basicDataSource.getMaxWaitMillis());
}
username = root
password = 1234
driverClassName = com.mysql.jdbc.Driver
url = jdbc:mysql:///tables
initialSize = 10
maxIdle = 30
minIdle = 5
maxWaitMillis = 5000
C3P0数据源
c3p0数据源是我们经常使用的一个数据库连接池,有手动加载和配置文件两种方式。我们通常使用配置文件的方式进行加载。注意:我们要导入两个jar包:c3p0-0.9.5.2.jar
和mchange-commons-java-0.2.11.jar
手动加载
通过C3P0的QuickStart文档上的DEOM来快速的手动加载C3P0数据源
@Test
public void testC3P0() throws PropertyVetoException, SQLException {
ComboPooledDataSource cpds = new ComboPooledDataSource();
cpds.setDriverClass( "com.mysql.jdbc.Driver" ); //loads the jdbc driver
cpds.setJdbcUrl( "jdbc:mysql://localhost:3306/tables" );
cpds.setUser("root");
cpds.setPassword("1234");
System.out.println(cpds.getConnection());
}
通过配置文件的方式加载
- 创建C3P0-config.xml文件,参考文档中附录B**(注意:c3p0的配置文件要放在src文件夹下**)
- 创建 ComboPooledDataSource实例
- 从DataSource实例中获取数据库连接
C3P0-config.xml文件:
<?xml version="1.0" encoding="UTF-8"?>
<c3p0-config>
<named-config name="helloc3p0">
<!-- 指定连接数据源的基本属性 -->
<property name="user">root</property>
<property name="password">1234</property>
<property name="driverClass">com.mysql.jdbc.Driver</property>
<property name="jdbcUrl">jdbc:mysql:///tables</property>
<!-- 若数据库中连接数不足时, 一次向数据库服务器申请多少个连接 -->
<property name="acquireIncrement">5</property>
<!-- 初始化数据库连接池时连接的数量 -->
<property name="initialPoolSize">5</property>
<!-- 数据库连接池中的最小的数据库连接数 -->
<property name="minPoolSize">5</property>
<!-- 数据库连接池中的最大的数据库连接数 -->
<property name="maxPoolSize">10</property>
<!-- C3P0 数据库连接池可以维护的 Statement 的个数 -->
<property name="maxStatements">20</property>
<!-- 每个连接同时可以使用的 Statement 对象的个数 -->
<property name="maxStatementsPerConnection">5</property>
</named-config>
</c3p0-config>
自动加载代码:
@Test
public void testC3poWithConfigFile() throws Exception{
DataSource dataSource =
new ComboPooledDataSource("helloc3p0");
System.out.println(dataSource.getConnection());
ComboPooledDataSource comboPooledDataSource =
(ComboPooledDataSource) dataSource;
System.out.println(comboPooledDataSource.getMaxStatements());
}
重构JDBCTools文件
在一个项目里,有一个数据库连接池就够了,因此只需要一次实例化就可以,因此我们定义静态的对象,写静态的代码块。
在relase()方法中对数据库连接池的 Connection 对象进行 close 时,并不是真的进行关闭, 而是把该数据库连接会归还到数据库连接池中。
C3P0
在JDBCTools中:
//数据库连接池应只被初始化一次.
static{
dataSource = new ComboPooledDataSource("helloc3p0");
}
public static Connection getConnection() throws Exception {
return dataSource.getConnection();
}
dbcp
在JDBCTools中:
//数据库连接池应只被初始化一次.
static {
//dataSource = new ComboPooledDataSource("helloc3p0");
Properties properties = new Properties();
InputStream inputStream = JDBCTools.class.getClassLoader().getResourceAsStream("dbcp.properties");
try {
properties.load(inputStream);
} catch (IOException e) {
e.printStackTrace();
}
try {
dataSource = BasicDataSourceFactory.createDataSource(properties);
} catch (Exception e) {
e.printStackTrace();
}
}
public static Connection getConnection() throws Exception {
return dataSource.getConnection();
}
测试
@Test
public void testJDBCTools() throws Exception {
Connection connection = JDBCTools.getConnection();
System.out.println(connection);
}