数据库连接池应用中数据库服务器断开超时连接的问题

点击打开链接

数据库应用开发过程中，我们可能会遇到一个问题：应用使用了数据库连接池，每经过指定时间后，发出到数据库服务器的任何请求都会失败，而且有且仅有一次失败，之后的正常访问都没有问题。尤其是在Web应用中，如果晚上时段没有访问，而第二天第一个访客的经历就是碰到一个数据库访问错误，如果开发系统的程序员没有注意这个问题的话，可能终端用户访问会看到抛出的一堆数据库异常信息。

其实，这个问题的主要原因是，应用中数据库连接池中会保存指定数量的数据库连接实例，而这些连接实例并没有定时地检测其到数据库服务器连接是否正常；数据库服务器可以配置一个数据库连接实例的超时时间，超过时间后它会自动断开连接。也就是，被断开的那个连接此时仍然保存在应用的数据库连接池内，下次被使用的时候就会发生数据库连接断开而导致一次访问失败。

解决上述连接关闭的方案有两种值得推荐：

• 如果能够提供这样一种检测机制，在应用的连接池管理中定时地检测连接池中连接的有效性，就完全可以避免上面描述的问题。
• 在应用代码中通过异常处理机制，来实现该次业务的重新处理，也可以很好地避免。

我们举一个例子，使用Java开发的Web系统，Tomcat作为HTTP服务器，MySQL作为数据库，抛出异常的信息如下所示：

[plain]  view plain  copy

1. [http-bio-8080-exec-10] 2012-11-28 00:55:43 [org.shirdrn.wm.de.action.StatAction]-[WARN]   
2. com.ibatis.dao.client.DaoException: Error ending SQL Map transaction.  Cause: java.sql.SQLException: Already closed.  
3.     at com.ibatis.dao.engine.transaction.sqlmap.SqlMapDaoTransaction.rollback(SqlMapDaoTransaction.java:51)  
4.     at com.ibatis.dao.engine.transaction.sqlmap.SqlMapDaoTransactionManager.rollbackTransaction(SqlMapDaoTransactionManager.java:85)  
5.     at com.ibatis.dao.engine.impl.DaoContext.endTransaction(DaoContext.java:112)  
6.     at com.ibatis.dao.engine.impl.DaoProxy.invoke(DaoProxy.java:77)  
7.     at $Proxy8.selectByExample(Unknown Source)  
8.     at org.shirdrn.wm.de.service.impl.StatItemsServiceImpl.countItems(Unknown Source)  
9.     at org.shirdrn.wm.de.action.StatAction.makeStat(Unknown Source)  
10.     at org.shirdrn.wm.de.action.StatAction.doGet(Unknown Source)  
11.     at javax.servlet.http.HttpServlet.service(HttpServlet.java:621)  
12.     at javax.servlet.http.HttpServlet.service(HttpServlet.java:722)  
13.     at org.apache.catalina.core.ApplicationFilterChain.internalDoFilter(ApplicationFilterChain.java:305)  
14.     at org.apache.catalina.core.ApplicationFilterChain.doFilter(ApplicationFilterChain.java:210)  
15.     at org.apache.catalina.core.StandardWrapperValve.invoke(StandardWrapperValve.java:224)  
16.     at org.apache.catalina.core.StandardContextValve.invoke(StandardContextValve.java:169)  
17.     at org.apache.catalina.authenticator.AuthenticatorBase.invoke(AuthenticatorBase.java:472)  
18.     at org.apache.catalina.core.StandardHostValve.invoke(StandardHostValve.java:168)  
19.     at org.apache.catalina.valves.ErrorReportValve.invoke(ErrorReportValve.java:98)  
20.     at org.apache.catalina.valves.AccessLogValve.invoke(AccessLogValve.java:927)  
21.     at org.apache.catalina.core.StandardEngineValve.invoke(StandardEngineValve.java:118)  
22.     at org.apache.catalina.connector.CoyoteAdapter.service(CoyoteAdapter.java:407)  
23.     at org.apache.coyote.http11.AbstractHttp11Processor.process(AbstractHttp11Processor.java:987)  
24.     at org.apache.coyote.AbstractProtocol$AbstractConnectionHandler.process(AbstractProtocol.java:579)  
25.     at org.apache.tomcat.util.net.JIoEndpoint$SocketProcessor.run(JIoEndpoint.java:307)  
26.     at java.util.concurrent.ThreadPoolExecutor$Worker.runTask(ThreadPoolExecutor.java:886)  
27.     at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:908)  
28.     at java.lang.Thread.run(Thread.java:619)  
29. Caused by: java.sql.SQLException: Already closed.  
30.     at org.apache.commons.dbcp.PoolableConnection.close(PoolableConnection.java:84)  
31.     at org.apache.commons.dbcp.PoolingDataSource$PoolGuardConnectionWrapper.close(PoolingDataSource.java:181)  
32.     at com.ibatis.sqlmap.engine.transaction.jdbc.JdbcTransaction.close(JdbcTransaction.java:81)  
33.     at com.ibatis.sqlmap.engine.transaction.TransactionManager.end(TransactionManager.java:93)  
34.     at com.ibatis.sqlmap.engine.impl.SqlMapExecutorDelegate.endTransaction(SqlMapExecutorDelegate.java:734)  
35.     at com.ibatis.sqlmap.engine.impl.SqlMapSessionImpl.endTransaction(SqlMapSessionImpl.java:176)  
36.     at com.ibatis.sqlmap.engine.impl.SqlMapClientImpl.endTransaction(SqlMapClientImpl.java:153)  
37.     at com.ibatis.dao.engine.transaction.sqlmap.SqlMapDaoTransaction.rollback(SqlMapDaoTransaction.java:49)  
38.     ... 25 more  

我们通过上面给出的第二种方案来解决，对应异常中实现的代码，进行异常处理的逻辑如下所示：

[java]  view plain  copy

1. protected void doGet(HttpServletRequest request, HttpServletResponse response) throws ServletException, IOException {  
2.     boolean retry = false;  
3.     String type = request.getParameter(RequestParams.ITEM_TYPE);  
4.     String top = request.getParameter(RequestParams.TOP_N);  
5.     Byte itemType = Byte.parseByte(type);  
6.     Integer topN = super.topN;  
7.     if(top!=null) {  
8.         try {  
9.             topN = Integer.parseInt(top);  
10.         } catch (Exception e) {}  
11.     }  
12.     Target target = itemNames.get(itemType);  
13.     try {  
14.         makeStat(request, response, itemType, topN, target);  
15.     } catch (Exception e) {  
16.         LOG.warn("", e);  
17.         // com.ibatis.dao.client.DaoException: Error ending SQL Map transaction.  Cause: java.sql.SQLException: Already closed.  
18.         if(!retry && e instanceof DaoException) {  
19.             LOG.warn("Try to obtain database connection again.");  
20.             retry = true;  
21.             this.makeStat(request, response, itemType, topN, target);  
22.         } else {  
23.             response.sendError(500, e.toString());  
24.             return;  
25.         }  
26.     }  
27.     request.getRequestDispatcher(target.url).forward(request, response);  
28. }  
29.   
30. private void makeStat(HttpServletRequest request, HttpServletResponse response,   
31.         Byte itemType, Integer topN, Target target) throws IOException, ServletException {  
32.     List<StatItems> items = statItemsService.countItems(itemType, new Date(), topN);  
33.     for (StatItems statK : items) {  
34.         if(statK.getItemName()!=null && !"null".equalsIgnoreCase(statK.getItemName())) {  
35.             pieDataset.setValue(statK.getItemName().trim() + " (" + statK.getPercentage() + ")", statK.getItemValue());  
36.         }  
37.     }  
38.     String imageUrl = super.generateImage(pieDataset, target.title, request);  
39.     request.setAttribute("items", items);  
40.     request.setAttribute("imageUrl", imageUrl);  
41.     if(items!=null && !items.isEmpty() && items.size()<topN) {  
42.         topN = items.size();  
43.     }  
44.     request.setAttribute("topN", topN);  
45. }  

上面代码，判断如果是发生连接失败，则保存请求参数，再重新处理该请求。

 

另一种不推荐的方案，就是修改数据库服务器的连接超时配置。因为在实际项目中，通常应用上线的相关人员未必是DBA，对于修改数据库服务器的配置可能会给其它上线业务带来风险。解决方法如下：

以MySQL为例，查看文件/etc/my.cnf，查询有关超时配置的参数：

[plain]  view plain  copy

1. mysql> show variables like '%timeout';  
2. +----------------------------+----------+  
3. | Variable_name              | Value    |  
4. +----------------------------+----------+  
5. | connect_timeout            | 10       |  
6. | delayed_insert_timeout     | 300      |  
7. | innodb_lock_wait_timeout   | 50       |  
8. | innodb_rollback_on_timeout | OFF      |  
9. | interactive_timeout        | 28800    |  
10. | lock_wait_timeout          | 31536000 |  
11. | net_read_timeout           | 30       |  
12. | net_write_timeout          | 60       |  
13. | slave_net_timeout          | 3600     |  
14. | wait_timeout               | 28800    |  
15. +----------------------------+----------+  

我们可以在属性组mysqld下面修改如下两个参数：

• interactive_timeout
• wait_timeout

MySQL数据库服务器配置的连接超时时间默认是8小时，如果修改的超时时间足够长的话，就不会出现前面发生的连接断开的问题。但是，如果有很多应用都在使用数据库连接池，大量的数据库连接资源一直被占用，严重的话可能使数据库服务器宕机，而且，也会使一些攻击者伪造大量请求，使数据库服务器负荷过载而宕机，从而影响应用处理业务。