使用c3p0与DBCP连接池，造成的MySql 8小时问题解决方案

http://blog.csdn.net/wangfayinn/article/details/24623575

本文提供了对c3p0与DBCP连接池连接MySql数据库时， 8小时内无请求自动断开连接的解决方案。首先介绍一下我在项目（c3p0连接池）中遇到的问题，后面还提供了使用DBCP连接池的解决方案。

基本问题解决

项目环境：

Java Web项目框架为Spring MVC+JPA，使用c3p0连接池，发布环境为Tomcat 7

错误描述：

项目运行一段时间（大概几个小时）之后访问时会出现第一次访问报错，再次访问正常的现象，且多次出现此问题。

报错日志：

[plain]  view plain copy

1. org.springframework.transaction.CannotCreateTransactionException: Could not open JPA EntityManager for transaction; nested exception is javax.persistence.PersistenceException: org.hibernate.TransactionException: JDBC begin transaction failed:   
2.     at org.springframework.orm.jpa.JpaTransactionManager.doBegin(JpaTransactionManager.java:428)  
3.     at org.springframework.transaction.support.AbstractPlatformTransactionManager.getTransaction(AbstractPlatformTransactionManager.java:372)  
4.     at org.springframework.transaction.interceptor.TransactionAspectSupport.createTransactionIfNecessary(TransactionAspectSupport.java:417)  
5.     at org.springframework.transaction.interceptor.TransactionAspectSupport.invokeWithinTransaction(TransactionAspectSupport.java:255)  
6.     at org.springframework.transaction.interceptor.TransactionInterceptor.invoke(TransactionInterceptor.java:94)  
7.     at org.springframework.aop.framework.ReflectiveMethodInvocation.proceed(ReflectiveMethodInvocation.java:172)  
8.     at org.springframework.aop.framework.CglibAopProxy$DynamicAdvisedInterceptor.intercept(CglibAopProxy.java:631)  
9.     at com.appcarcare.cube.service.UserService
   EnhancerByCGLIB
   a4429cba.getUserDao(<generated>)  
10.   
11.     at com.appcarcare.cube.servlet.DataCenterServlet$SqlTimer.connectSql(DataCenterServlet.java:76)  
12.     at com.appcarcare.cube.servlet.DataCenterServlet$SqlTimer.run(DataCenterServlet.java:70)  
13.     at java.util.TimerThread.mainLoop(Timer.java:555)  
14.     at java.util.TimerThread.run(Timer.java:505)  
15. Caused by: javax.persistence.PersistenceException: org.hibernate.TransactionException: JDBC begin transaction failed:   
16.     at org.hibernate.ejb.AbstractEntityManagerImpl.convert(AbstractEntityManagerImpl.java:1387)  
17.     at org.hibernate.ejb.AbstractEntityManagerImpl.convert(AbstractEntityManagerImpl.java:1310)  
18.   
19.     at org.hibernate.ejb.AbstractEntityManagerImpl.throwPersistenceException(AbstractEntityManagerImpl.java:1397)  
20.     at org.hibernate.ejb.TransactionImpl.begin(TransactionImpl.java:62)  
21.     at org.springframework.orm.jpa.DefaultJpaDialect.beginTransaction(DefaultJpaDialect.java:71)  
22.     at org.springframework.orm.jpa.vendor.HibernateJpaDialect.beginTransaction(HibernateJpaDialect.java:60)  
23.     at org.springframework.orm.jpa.JpaTransactionManager.doBegin(JpaTransactionManager.java:378)  
24.     ... 11 more  
25. Caused by: org.hibernate.TransactionException: JDBC begin transaction failed:   
26.     at org.hibernate.engine.transaction.internal.jdbc.JdbcTransaction.doBegin(JdbcTransaction.java:76)  
27.     at org.hibernate.engine.transaction.spi.AbstractTransactionImpl.begin(AbstractTransactionImpl.java:160)  
28.   
29.     at org.hibernate.internal.SessionImpl.beginTransaction(SessionImpl.java:1426)  
30.     at org.hibernate.ejb.TransactionImpl.begin(TransactionImpl.java:59)  
31.     ... 14 more  
32. Caused by: com.mysql.jdbc.exceptions.jdbc4.CommunicationsException: Communications link failure  
33.   
34. The last packet successfully received from the server was 1,836,166 milliseconds ago.  The last packet sent successfully to the server was 29,134 milliseconds ago.  
35.     at sun.reflect.NativeConstructorAccessorImpl.newInstance0(Native Method)  
36.     at sun.reflect.NativeConstructorAccessorImpl.newInstance(NativeConstructorAccessorImpl.java:57)  
37.     at sun.reflect.DelegatingConstructorAccessorImpl.newInstance(DelegatingConstructorAccessorImpl.java:45)  
38.     at java.lang.reflect.Constructor.newInstance(Constructor.java:526)  
39.     at com.mysql.jdbc.Util.handleNewInstance(Util.java:411)  
40.     at com.mysql.jdbc.SQLError.createCommunicationsException(SQLError.java:1117)  
41.     at com.mysql.jdbc.MysqlIO.reuseAndReadPacket(MysqlIO.java:3567)  
42.     at com.mysql.jdbc.MysqlIO.reuseAndReadPacket(MysqlIO.java:3456)  
43.   
44.     at com.mysql.jdbc.MysqlIO.checkErrorPacket(MysqlIO.java:3997)  
45.     at com.mysql.jdbc.MysqlIO.sendCommand(MysqlIO.java:2468)  
46.     at com.mysql.jdbc.MysqlIO.sqlQueryDirect(MysqlIO.java:2629)  
47.     at com.mysql.jdbc.ConnectionImpl.execSQL(ConnectionImpl.java:2713)  
48.     at com.mysql.jdbc.ConnectionImpl.setAutoCommit(ConnectionImpl.java:5060)  
49.     at com.mchange.v2.c3p0.impl.NewProxyConnection.setAutoCommit(NewProxyConnection.java:881)  
50.     at org.hibernate.engine.transaction.internal.jdbc.JdbcTransaction.doBegin(JdbcTransaction.java:72)  
51.   
52.     ... 17 more  
53. Caused by: java.net.SocketException: Software caused connection abort: recv failed  
54.     at java.net.SocketInputStream.socketRead0(Native Method)  
55.     at java.net.SocketInputStream.read(SocketInputStream.java:150)  
56.     at java.net.SocketInputStream.read(SocketInputStream.java:121)  
57.     at com.mysql.jdbc.util.ReadAheadInputStream.fill(ReadAheadInputStream.java:114)  
58.     at com.mysql.jdbc.util.ReadAheadInputStream.readFromUnderlyingStreamIfNecessary(ReadAheadInputStream.java:161)  
59.     at com.mysql.jdbc.util.ReadAheadInputStream.read(ReadAheadInputStream.java:189)  
60.     at com.mysql.jdbc.MysqlIO.readFully(MysqlIO.java:3014)  
61.     at com.mysql.jdbc.MysqlIO.reuseAndReadPacket(MysqlIO.java:3467)  
62.     ... 25 more  

原因分析：

MySQL服务器默认的“wait_timeout”是28800秒即8小时，意味着如果一个连接的空闲时间超过8个小时，MySQL将自动断开该连接，而连接池却认为该连接还是有效的(因为并未校验连接的有效性)，当应用申请使用该连接时，就会导致上面的报错。

解决方案(解决这个问题的办法有三种，推荐第二种)：

1. 增加 MySQL 的 wait_timeout 属性的值 

修改mysql安装目录下的配置文件 my.ini文件（如果没有此文件， 复制“my-default.ini”文件，生成“复件 my-default.ini”文件。 将“复件 my-default.ini”文件重命名成“my.ini” ），在文件中设置： 

[plain]  view plain copy

1. wait_timeout=31536000  
2. interactive_timeout=31536000  

这两个参数的默认值是8小时(60*60*8=28800)。

注意： 1.wait_timeout的最大值只允许2147483 （24天左右）

2.修改配置文件为网上大部分文章所提供的方式，也可以使用mysql命令对这两个属性进行修改

2. 减少连接池内连接的生存周期

减少连接池内连接的生存周期， 使之小于 上一项中所设置的 wait_timeout 的值 。  

修改 c3p0 的配置文件， 在 Spring 的配置文件中设置：

[java]  view plain copy

1. <bean id="dataSource"  class="com.mchange.v2.c3p0.ComboPooledDataSource">       
2. <property name="maxIdleTime"value="1800"/>    
3. <!--other properties -->    
4. </bean>  

3. 定期使用连接池内的连接

定期使用连接池内的连接，使得它们不会因为闲置超时而被 MySQL 断开。 

修改 c3p0 的配置文件,在  Spring 的配置文件中设置：

[java]  view plain copy

1.        <bean id="dataSource" class="com.mchange.v2.c3p0.ComboPooledDataSource">    
2. <property name="preferredTestQuery" value="SELECT 1"/>    
3. <property name="idleConnectionTestPeriod" value="18000"/>    
4. <property name="testConnectionOnCheckout" value="true"/>    
5. </bean>  

知识扩展

C3P0

C3P0是一个开放源代码的JDBC连接池，它在lib目录中与Hibernate一起发布,包括了实现jdbc3和jdbc2扩展规范说明的Connection 和Statement 池的DataSources 对象。 c3p0配置文件

[html]  view plain copy

1. <default-config>   
2. 　　<!--当连接池中的连接耗尽的时候c3p0一次同时获取的连接数。Default: 3 -->   
3. 　　<property name="acquireIncrement">3</property>   
4. 　　<!--定义在从数据库获取新连接失败后重复尝试的次数。Default: 30 -->   
5. 　　<property name="acquireRetryAttempts">30</property>   
6. 　　<!--两次连接中间隔时间，单位毫秒。Default: 1000 -->   
7. 　　<property name="acquireRetryDelay">1000</property>   
8. 　　<!--连接关闭时默认将所有未提交的操作回滚。Default: false -->   
9. 　　<property name="autoCommitOnClose">false</property>   
10. 　　<!--c3p0将建一张名为Test的空表，并使用其自带的查询语句进行测试。如果定义了这个参数那么   
11. 　　属性preferredTestQuery将被忽略。你不能在这张Test表上进行任何操作，它将只供c3p0测试   
12. 　　使用。Default: null-->   
13. 　　<property name="automaticTestTable">Test</property>   
14. 　　<!--获取连接失败将会引起所有等待连接池来获取连接的线程抛出异常。但是数据源仍有效   
15. 　　保留，并在下次调用getConnection()的时候继续尝试获取连接。如果设为true，那么在尝试   
16. 　　获取连接失败后该数据源将申明已断开并永久关闭。Default: false-->   
17. 　　<property name="breakAfterAcquireFailure">false</property>   
18. 　　<!--当连接池用完时客户端调用getConnection()后等待获取新连接的时间，超时后将抛出   
19. 　　SQLException,如设为0则无限期等待。单位毫秒。Default: 0 -->   
20. 　　<property name="checkoutTimeout">100</property>   
21. 　　<!--通过实现ConnectionTester或QueryConnectionTester的类来测试连接。类名需制定全路径。   
22. 　　Default: com.mchange.v2.c3p0.impl.DefaultConnectionTester-->   
23. 　　<property name="connectionTesterClassName"></property>   
24. 　　<!--指定c3p0 libraries的路径，如果（通常都是这样）在本地即可获得那么无需设置，默认null即可   
25. 　　Default: null-->   
26. 　　<property name="factoryClassLocation">null</property>   
27. 　　<!--Strongly disrecommended. Setting this to true may lead to subtle and bizarre bugs.   
28. 　　（文档原文）作者强烈建议不使用的一个属性-->   
29. 　　<property name="forceIgnoreUnresolvedTransactions">false</property>   
30. 　　<!--每60秒检查所有连接池中的空闲连接。Default: 0 -->   
31. 　　<property name="idleConnectionTestPeriod">60</property>   
32. 　　<!--初始化时获取三个连接，取值应在minPoolSize与maxPoolSize之间。Default: 3 -->   
33. 　　<property name="initialPoolSize">3</property>   
34. 　　<!--最大空闲时间,60秒内未使用则连接被丢弃。若为0则永不丢弃。Default: 0 -->   
35. 　　<property name="maxIdleTime">60</property>   
36. 　　<!--连接池中保留的最大连接数。Default: 15 -->   
37. 　　<property name="maxPoolSize">15</property>   
38. 　　<!--JDBC的标准参数，用以控制数据源内加载的PreparedStatements数量。但由于预缓存的statements   
39. 　　属于单个connection而不是整个连接池。所以设置这个参数需要考虑到多方面的因素。   
40. 　　如果maxStatements与maxStatementsPerConnection均为0，则缓存被关闭。Default: 0-->   
41. 　　<property name="maxStatements">100</property>   
42. 　　<!--maxStatementsPerConnection定义了连接池内单个连接所拥有的最大缓存statements数。Default: 0 -->   
43. 　　<property name="maxStatementsPerConnection"></property>   
44. 　　<!--c3p0是异步操作的，缓慢的JDBC操作通过帮助进程完成。扩展这些操作可以有效的提升性能   
45. 　　通过多线程实现多个操作同时被执行。Default: 3-->   
46. 　　<property name="numHelperThreads">3</property>   
47. 　　<!--当用户调用getConnection()时使root用户成为去获取连接的用户。主要用于连接池连接非c3p0   
48. 　　的数据源时。Default: null-->   
49. 　　<property name="overrideDefaultUser">root</property>   
50. 　　<!--与overrideDefaultUser参数对应使用的一个参数。Default: null-->   
51. 　　<property name="overrideDefaultPassword">password</property>   
52. 　　<!--密码。Default: null-->   
53. 　　<property name="password"></property>   
54. 　　<!--定义所有连接测试都执行的测试语句。在使用连接测试的情况下这个一显著提高测试速度。注意：   
55. 　　测试的表必须在初始数据源的时候就存在。Default: null-->   
56. 　　<property name="preferredTestQuery">select id from test where id=1</property>   
57. 　　<!--用户修改系统配置参数执行前最多等待300秒。Default: 300 -->   
58. 　　<property name="propertyCycle">300</property>   
59. 　　<!--因性能消耗大请只在需要的时候使用它。如果设为true那么在每个connection提交的   
60. 　　时候都将校验其有效性。建议使用idleConnectionTestPeriod或automaticTestTable   
61. 　　等方法来提升连接测试的性能。Default: false -->   
62. 　　<property name="testConnectionOnCheckout">false</property>   
63. 　　<!--如果设为true那么在取得连接的同时将校验连接的有效性。Default: false -->   
64. 　　<property name="testConnectionOnCheckin">true</property>   
65. 　　<!--用户名。Default: null-->   
66. 　　<property name="user">root</property>   
67. 　　在Hibernate（spring管理）中的配置：   
68. 　　<bean id="dataSource" class="com.mchange.v2.c3p0.ComboPooledDataSource" destroy-method="close">   
69. 　　<property name="driverClass"><value>oracle.jdbc.driver.OracleDriver</value></property>   
70. 　　<property name="jdbcUrl"><value>jdbc:oracle:thin:@localhost:1521:Test</value></property>   
71. 　　<property name="user"><value>Kay</value></property>   
72. 　　<property name="password"><value>root</value></property>   
73. 　　<!--连接池中保留的最小连接数。-->   
74. 　　<property name="minPoolSize" value="10" />   
75. 　　<!--连接池中保留的最大连接数。Default: 15 -->   
76. 　　<property name="maxPoolSize" value="100" />   
77. 　　<!--最大空闲时间,1800秒内未使用则连接被丢弃。若为0则永不丢弃。Default: 0 -->   
78. 　　<property name="maxIdleTime" value="1800" />   
79. 　　<!--当连接池中的连接耗尽的时候c3p0一次同时获取的连接数。Default: 3 -->   
80. 　　<property name="acquireIncrement" value="3" />   
81. 　　<property name="maxStatements" value="1000" />   
82. 　　<property name="initialPoolSize" value="10" />   
83. 　　<!--每60秒检查所有连接池中的空闲连接。Default: 0 -->   
84. 　　<property name="idleConnectionTestPeriod" value="60" />   
85. 　　<!--定义在从数据库获取新连接失败后重复尝试的次数。Default: 30 -->   
86. 　　<property name="acquireRetryAttempts" value="30" />   
87. 　　<property name="breakAfterAcquireFailure" value="true" />   
88. 　　<property name="testConnectionOnCheckout" value="false" />   
89. 　　</bean>   
90. 　　###########################   
91. 　　### C3P0 Connection Pool###   
92. 　　###########################   
93. 　　#hibernate.c3p0.max_size 2   
94. 　　#hibernate.c3p0.min_size 2   
95. 　　#hibernate.c3p0.timeout 5000   
96. 　　#hibernate.c3p0.max_statements 100   
97. 　　#hibernate.c3p0.idle_test_period 3000   
98. 　　#hibernate.c3p0.acquire_increment 2   
99. 　　#hibernate.c3p0.validate false   
100. 　　在hibernate.cfg.xml文件里面加入如下的配置：   
101. 　　<!-- 最大连接数 -->   
102. 　　<property name="hibernate.c3p0.max_size">20</property>   
103. 　　<!-- 最小连接数 -->   
104. 　　<property name="hibernate.c3p0.min_size">5</property>   
105. 　　<!-- 获得连接的超时时间,如果超过这个时间,会抛出异常，单位毫秒 -->   
106. 　　<property name="hibernate.c3p0.timeout">120</property>   
107. 　　<!-- 最大的PreparedStatement的数量 -->   
108. 　　<property name="hibernate.c3p0.max_statements">100</property>   
109. 　　<!-- 每隔120秒检查连接池里的空闲连接 ，单位是秒-->   
110. 　　<property name="hibernate.c3p0.idle_test_period">120</property>   
111. 　　<!-- 当连接池里面的连接用完的时候，C3P0一下获取的新的连接数 -->   
112. 　　<property name="hibernate.c3p0.acquire_increment">2</property>   
113. 　　<!-- 每次都验证连接是否可用 -->   
114. 　　<property name="hibernate.c3p0.validate">true</property>  

使用DBCP连接池时出现MySql 8小时断开连接的解决方法

修改l配置文件：
修改如下：

[html]  view plain copy

1. <data-sources>  
2.         <data-source key="org.apache.struts.action.DATA_SOURCE"                             type="org.apache.commons.dbcp.BasicDataSource">  
3.         <set-property property="driverClassName" value="com.mysql.jdbc.Driver" />  
4.         <set-property property="description" value="wjjg" />  
5.         <set-property property="url" value="jdbc:mysql://localhost/wjjg?useUnicode=true&characterEncoding=GB2312" />  
6.         <set-property property="password" value="12345678" />  
7.         <set-property property="username" value="wjjg" />  
8.         <set-property property="maxActive" value="10" />  
9.         <set-property property="maxIdle" value="60000" />  
10.         <set-property property="maxWait" value="60000" />  
11.         <set-property property="defaultAutoCommit" value="true" />  
12.         <set-property property="defaultReadOnly" value="false" />    
13.         <set-property property="testOnBorrow" value="true"/>  
14.         <set-property property="validationQuery" value="select 1"/>  
15. </data-source>  

         其中 testOnBorrow  和  validationQuery  很重要。

testOnBorrow的意思是从数据库连接池中取得连接时，对其的有效性进行检查。

validationQuery 是用来检查的SQL语句，“select 1”执行较快，是一个不错的检测语句。

回顾

当测试人员反映到这个问题的时候，很快就锁定了Mysql八小时的问题，但是解决方案却费了我不小功夫，先是考虑到修改mysql配置文件肯定是不太合理的，弃之。

然后想了一下在一个servlet中写了个定时器，让它每两小时查一下数据库，运行了几天发现问题仍然存在，将定时器间隔时间修改为30分钟、3分钟仍然无济于事，异常照常出现，弃之。

在网上搜了一下解决方案也挺多，把

[java]  view plain copy

1. <set-property property="testOnBorrow" value="true"/>  
2.         <set-property property="validationQuery" value="select 1"/>  

写入到配置文件中，运行报错，说bean中没有这两个属性，查看了一下原来是我用的c3p0连接池，而这个解决方案是针对DBCP连接池的。

最后在配置文件中，添加了

[java]  view plain copy

1. <property name="maxIdleTime"value="1800"/>  

成功解决了问题。

感悟，问题很简单，就是改个配置文件，但是遇到问题需要快速解决问题的能力，更需要认真的态度。

补充我的经历，一开始专注在修改hibernate.cfg.xml，这个文件的c3p0配置，怎么修改都不好用，后来看其他文章是修改applicationContext.xml。

试了一下，原来之前设置的参数都没有生效，在applicationContext.xml里设置，都生效了。所以，浪费了好多好多时间啊。