转载自:http://blog.csdn.net/jiangguilong2000/article/details/68483886
http://blog.csdn.net/qq_26562641/article/details/54600976
目前的数据库连接池有多种,在性能方面 hikariCP>druid>tomcat-jdbc>dbcp>c3p0,hikariCP的高性能得益于最大限度的避免锁竞争。但druid功能最为全面,sql拦截等功能,统计数据较为全面,具有良好的扩展性。
druid可开启prepareStatement缓存,对性能会有大概20%的提升。也可以设置设置psCache,psCache是connection私有的,所以不存在线程竞争的问题,开启psCache不会存在竞争的性能损耗。psCache的key为prepare执行的sql和catalog等,value对应的为prepareStatement对象。开启缓存主要是减少了解析sql的开销。
Druid 参数
name: 配置这个属性的意义在于,如果存在多个数据源,监控的时候可以通过名字来区分开来。
jdbcUrl: 连接数据库的url。
username:
password:
driverClassName: 这一项可配可不配,如果不配置druid会根据url自动识别dbType,然后选择相应的driverClassName。
initialSize: 初始化连接数量。
minIdle: 最小空闲连接数。
maxActive: 最大连接数,默认值:8。
maxWait: 获取连接时最大等待时间,单位毫秒,默认值:-1L。配置了maxWait之后,缺省启用公平锁,并发效率会有所下降,如果需要可以通过配置useUnfairLock属性为true使用非公平锁。
timeBetweenEvictionRunsMillis: 配置间隔多久才进行一次检测,检测需要关闭的空闲连接,单位是毫秒,默认值:60000,Destroy线程会检测连接的间隔时间。
minEvictableIdleTimeMillis: 配置一个连接在池中最小生存的时间,单位是毫秒,默认值:1800000。
validationQuery: 用来检测连接是否有效的sql,要求是一个查询语句。如果validationQuery为null,testOnBorrow、testOnReturn、testWhileIdle都不会其作用。通常为select 1。
testOnBorrow: 申请连接时执行validationQuery检测连接是否有效,做了这个配置会降低性能,默认值:FALSE。
testOnReturn: 归还连接时执行validationQuery检测连接是否有效,做了这个配置会降低性能,默认值:FALSE。
testWhileIdle: 建议配置为true,不影响性能,并且保证安全性。 申请连接的时候检测,如果空闲时间大于 timeBetweenEvictionRunsMillis, 执行validationQuery检测连接是否有效。默认值:TRUE
timeBetweenEvictionRunsMillis: Destroy线程会检测连接的间隔时间,testWhileIdle的判断依据。
minEvictableIdleTimeMillis: Destory线程中如果检测到当前连接的最后活跃时间和当前时间的差值大于minEvictableIdleTimeMillis,则关闭当前连接。
poolPreparedStatements: 是否缓存preparedStatement,也就是PSCache。PSCache对支持游标的数据库性能提升巨大,比如说oracle。在mysql5.5以下的版本中没有PSCache功能,建议关闭掉。5.5及以上版本有PSCache,建议开启。
maxOpenPreparedStatements: 默认值:-1,要启用PSCache,必须配置大于0,当大于0时,poolPreparedStatements自动触发修改为true。在Druid中,不会存在Oracle下PSCache占用内存过多的问题,可以把这个数值配置大一些,比如说100。
maxPoolPreparedStatementPerConnectionSize: 默认值:10,要启用PSCache,必须配置大于0,当大于0时,
poolPreparedStatements自动触发修改为true。单个connnection独享一个statement cache,也就是说maxOpenPreparedStatements是针对单个connection链接的。
运行原理:
数据库连接池在初始化的时候会创建initialSize个连接,当有数据库操作时,会从池中取出一个连接。如果当前池中正在使用的连接数等于maxActive,则会等待一段时间,等待其他操作释放掉某一个连接,如果这个等待时间超过了maxWait,则会报错;如果当前正在使用的连接数没有达到maxActive,则判断当前是否空闲连接,如果有则直接使用空闲连接,如果没有则新建立一个连接。在连接使用完毕后,不是将其物理连接关闭,而是将其放入池中等待其他操作复用。
同时连接池内部有机制判断,如果当前的总的连接数少于miniIdle,则会建立新的空闲连接,以保证连接数得到miniIdle。如果当前连接池中某个连接在空闲了timeBetweenEvictionRunsMillis时间后仍然没有使用,则被物理性的关闭掉。有些数据库连接的时候有超时限制(mysql连接在8小时后断开),或者由于网络中断等原因,连接池的连接会出现失效的情况,这时候设置一个testWhileIdle参数为true,可以保证连接池内部定时检测连接的可用性,不可用的连接会被抛弃或者重建,最大情况的保证从连接池中得到的Connection对象是可用的。当然,为了保证绝对的可用性,你也可以使用testOnBorrow为true(即在获取Connection对象时检测其可用性),不过这样会影响性能。
spring配置文件示例:
如果要进行SQL监控,可以加入以下代码:
闲置检测,创建连接,废弃连接清理由这三线程管理:
http://blog.csdn.net/qq_26562641/article/details/54600976
目前的数据库连接池有多种,在性能方面 hikariCP>druid>tomcat-jdbc>dbcp>c3p0,hikariCP的高性能得益于最大限度的避免锁竞争。但druid功能最为全面,sql拦截等功能,统计数据较为全面,具有良好的扩展性。
druid可开启prepareStatement缓存,对性能会有大概20%的提升。也可以设置设置psCache,psCache是connection私有的,所以不存在线程竞争的问题,开启psCache不会存在竞争的性能损耗。psCache的key为prepare执行的sql和catalog等,value对应的为prepareStatement对象。开启缓存主要是减少了解析sql的开销。
Druid 参数
name: 配置这个属性的意义在于,如果存在多个数据源,监控的时候可以通过名字来区分开来。
jdbcUrl: 连接数据库的url。
username:
password:
driverClassName: 这一项可配可不配,如果不配置druid会根据url自动识别dbType,然后选择相应的driverClassName。
initialSize: 初始化连接数量。
minIdle: 最小空闲连接数。
maxActive: 最大连接数,默认值:8。
maxWait: 获取连接时最大等待时间,单位毫秒,默认值:-1L。配置了maxWait之后,缺省启用公平锁,并发效率会有所下降,如果需要可以通过配置useUnfairLock属性为true使用非公平锁。
timeBetweenEvictionRunsMillis: 配置间隔多久才进行一次检测,检测需要关闭的空闲连接,单位是毫秒,默认值:60000,Destroy线程会检测连接的间隔时间。
minEvictableIdleTimeMillis: 配置一个连接在池中最小生存的时间,单位是毫秒,默认值:1800000。
validationQuery: 用来检测连接是否有效的sql,要求是一个查询语句。如果validationQuery为null,testOnBorrow、testOnReturn、testWhileIdle都不会其作用。通常为select 1。
testOnBorrow: 申请连接时执行validationQuery检测连接是否有效,做了这个配置会降低性能,默认值:FALSE。
testOnReturn: 归还连接时执行validationQuery检测连接是否有效,做了这个配置会降低性能,默认值:FALSE。
testWhileIdle: 建议配置为true,不影响性能,并且保证安全性。 申请连接的时候检测,如果空闲时间大于 timeBetweenEvictionRunsMillis, 执行validationQuery检测连接是否有效。默认值:TRUE
timeBetweenEvictionRunsMillis: Destroy线程会检测连接的间隔时间,testWhileIdle的判断依据。
minEvictableIdleTimeMillis: Destory线程中如果检测到当前连接的最后活跃时间和当前时间的差值大于minEvictableIdleTimeMillis,则关闭当前连接。
poolPreparedStatements: 是否缓存preparedStatement,也就是PSCache。PSCache对支持游标的数据库性能提升巨大,比如说oracle。在mysql5.5以下的版本中没有PSCache功能,建议关闭掉。5.5及以上版本有PSCache,建议开启。
maxOpenPreparedStatements: 默认值:-1,要启用PSCache,必须配置大于0,当大于0时,poolPreparedStatements自动触发修改为true。在Druid中,不会存在Oracle下PSCache占用内存过多的问题,可以把这个数值配置大一些,比如说100。
maxPoolPreparedStatementPerConnectionSize: 默认值:10,要启用PSCache,必须配置大于0,当大于0时,
poolPreparedStatements自动触发修改为true。单个connnection独享一个statement cache,也就是说maxOpenPreparedStatements是针对单个connection链接的。
运行原理:
数据库连接池在初始化的时候会创建initialSize个连接,当有数据库操作时,会从池中取出一个连接。如果当前池中正在使用的连接数等于maxActive,则会等待一段时间,等待其他操作释放掉某一个连接,如果这个等待时间超过了maxWait,则会报错;如果当前正在使用的连接数没有达到maxActive,则判断当前是否空闲连接,如果有则直接使用空闲连接,如果没有则新建立一个连接。在连接使用完毕后,不是将其物理连接关闭,而是将其放入池中等待其他操作复用。
同时连接池内部有机制判断,如果当前的总的连接数少于miniIdle,则会建立新的空闲连接,以保证连接数得到miniIdle。如果当前连接池中某个连接在空闲了timeBetweenEvictionRunsMillis时间后仍然没有使用,则被物理性的关闭掉。有些数据库连接的时候有超时限制(mysql连接在8小时后断开),或者由于网络中断等原因,连接池的连接会出现失效的情况,这时候设置一个testWhileIdle参数为true,可以保证连接池内部定时检测连接的可用性,不可用的连接会被抛弃或者重建,最大情况的保证从连接池中得到的Connection对象是可用的。当然,为了保证绝对的可用性,你也可以使用testOnBorrow为true(即在获取Connection对象时检测其可用性),不过这样会影响性能。
spring配置文件示例:
<bean id="dataSource" class="com.alibaba.druid.pool.DruidDataSource"
destroy-method="close">
<property name="url" value="${url}" />
<property name="username" value="${username}" />
<property name="password" value="${password}" />
<property name="driverClassName" value="${driverClassName}" />
<property name="filters" value="${filters}" />
<property name="maxActive" value="${maxActive}" />
<property name="initialSize" value="${initialSize}" />
<property name="maxWait" value="${maxWait}" />
<property name="minIdle" value="${minIdle}" />
<property name="timeBetweenEvictionRunsMillis" value="${timeBetweenEvictionRunsMillis}" />
<property name="minEvictableIdleTimeMillis" value="${minEvictableIdleTimeMillis}" />
<property name="validationQuery" value="${validationQuery}" />
<property name="testWhileIdle" value="${testWhileIdle}" />
<property name="testOnBorrow" value="${testOnBorrow}" />
<property name="testOnReturn" value="${testOnReturn}" />
<property name="maxOpenPreparedStatements"
value="${maxOpenPreparedStatements}" />
<property name="removeAbandoned" value="${removeAbandoned}" /> <!-- 打开removeAbandoned功能 -->
<property name="removeAbandonedTimeout" value="${removeAbandonedTimeout}" /> <!-- 1800秒,也就是30分钟 -->
<property name="logAbandoned" value="${logAbandoned}" /> <!-- 关闭abanded连接时输出错误日志 -->
</bean>
如果要进行SQL监控,可以加入以下代码:
Log4j2Filter log4j2 = new Log4j2Filter();
log4j2.setResultSetLogEnabled(false);
log4j2.setStatementSqlPrettyFormat(false);
log4j2.setStatementExecutableSqlLogEnable(true);
log4j2.setDataSourceLogEnabled(false);
log4j2.setConnectionLogEnabled(false);
log4j2.setStatementLogEnabled(false);
log4j2.setResultSetLogEnabled(false);
ret.setProxyFilters(Arrays.asList(log4j2));
闲置检测,创建连接,废弃连接清理由这三线程管理:
Daemon Thread [Abandoned connection cleanup thread]
Daemon Thread [Druid-ConnectionPool-Create-1184124073]
Daemon Thread [Druid-ConnectionPool-Destroy-1184124073]