Springboot-cli 开发脚手架系列
Springboot整合druid连接池
介绍
- Druid是一个高效的数据查询系统,主要解决的是对于大量的基于时序的数据进行聚合查询。数据可以实时摄入,进入到Druid后立即可查,同时数据是几乎是不可变。通常是基于时序的事实事件,事实发生后进入Druid,外部系统就可以对该事实进行查询。
- Druid设计三个原则
- 快速查询(Fast Query) : 部分数据聚合(Partial Aggregate) + 内存华(In-Memory) + 索引(Index)
- 水平拓展能力(Horizontal Scalability):分布式数据(Distributed data)+并行化查询(Parallelizable Query)
- 实时分析(Realtime Analytics):Immutable Past , Append-Only Future
- Druid的技术特点
- 数据吞吐量大
- 支持流式数据摄入和实时
- 查询灵活且快速
1. 环境
pom.xml
引入依赖
<!--引入sql驱动依赖-->
<dependency>
<groupId>mysql</groupId>
<artifactId>mysql-connector-java</artifactId>
<scope>runtime</scope>
</dependency>
<!--引入mybatis-plus依赖-->
<dependency>
<groupId>com.baomidou</groupId>
<artifactId>mybatis-plus-boot-starter</artifactId>
<version>3.3.1</version>
</dependency>
<!--引入druid连接池依赖-->
<dependency>
<groupId>com.alibaba</groupId>
<artifactId>druid-spring-boot-starter</artifactId>
<version>1.2.3</version>
</dependency>
application.yml
配置连接池
server:
port: 9999
spring:
datasource:
url: jdbc:mysql://192.168.0.54:3306/example?useUnicode=true&&characterEncoding=utf-8&&useSSL=false
username: root
password: 123456
type: com.alibaba.druid.pool.DruidDataSource
driver-class-name: com.mysql.cj.jdbc.Driver
druid:
stat-view-servlet:
# 默认true 内置监控页面首页/druid/index.html
enabled: true
url-pattern: /druid/*
# 允许清空统计数据
reset-enable: true
# 这里为登录页面账号密码配置
login-username: root
login-password: 123456
# IP白名单 多个逗号分隔
allow:
# IP黑名单
deny:
filter:
stat:
# 开启监控sql
enabled: true
# 显示并标注慢sql 默认当超过3秒显示
log-slow-sql: true
slow-sql-millis: 3000
merge-sql: true
# 防SQL注入过滤
wall:
config:
# 允许多条sql同时执行
multi-statement-allow: true
##################################################################################################
# mybatis-plus
##################################################################################################
mybatis-plus:
mapper-locations: classpath:/mapper/*.xml
#实体扫描,多个package用逗号或者分号分隔
typeAliasesPackage: com.springboot.cli.domain
global-config:
#数据库相关配置
db-config:
#主键类型 AUTO:"数据库ID自增", INPUT:"用户输入ID", ID_WORKER:"全局唯一ID (数字类型唯一ID)", UUID:"全局唯一ID UUID";
id-type: AUTO
logic-delete-value: -1
logic-not-delete-value: 0
banner: false
configuration:
map-underscore-to-camel-case: true
cache-enabled: false
#配置JdbcTypeForNull
jdbc-type-for-null: 'null'
解析: 这里配置了
stat-view-servlet.enabled : true
开启内置监控页面首页/druid/index.html
,待会我们会用这个界面查看我们的sql执行效率。
- 其它配置解析
配置 | 缺省值 | 说明 |
---|---|---|
name | 配置这个属性的意义在于,如果存在多个数据源,监控的时候可以通过名字来区分开来。如果没有配置,将会生成一个名字,格式是:“DataSource-” + System.identityHashCode(this). 另外配置此属性至少在1.0.5版本中是不起作用的,强行设置name会出错。详情-点此处。 | |
url | 连接数据库的url,不同数据库不一样。例如: mysql : jdbc:mysql://10.20.153.104:3306/druid2 oracle : jdbc:oracle:thin:@10.20.149.85:1521:ocnauto | |
username | 连接数据库的用户名 | |
password | 连接数据库的密码。如果你不希望密码直接写在配置文件中,可以使用ConfigFilter。详细看这里 | |
driverClassName | 根据url自动识别 | 这一项可配可不配,如果不配置druid会根据url自动识别dbType,然后选择相应的driverClassName |
initialSize | 0 | 初始化时建立物理连接的个数。初始化发生在显示调用init方法,或者第一次getConnection时 |
maxActive | 8 | 最大连接池数量 |
maxIdle | 8 | 已经不再使用,配置了也没效果 |
minIdle | 最小连接池数量 | |
maxWait | 获取连接时最大等待时间,单位毫秒。配置了maxWait之后,缺省启用公平锁,并发效率会有所下降,如果需要可以通过配置useUnfairLock属性为true使用非公平锁。 | |
poolPreparedStatements | false | 是否缓存preparedStatement,也就是PSCache。PSCache对支持游标的数据库性能提升巨大,比如说oracle。在mysql下建议关闭。 |
maxPoolPreparedStatementPerConnectionSize | -1 | 要启用PSCache,必须配置大于0,当大于0时,poolPreparedStatements自动触发修改为true。在Druid中,不会存在Oracle下PSCache占用内存过多的问题,可以把这个数值配置大一些,比如说100 |
validationQuery | 用来检测连接是否有效的sql,要求是一个查询语句,常用select ‘x’。如果validationQuery为null,testOnBorrow、testOnReturn、testWhileIdle都不会起作用。 | |
validationQueryTimeout | 单位:秒,检测连接是否有效的超时时间。底层调用jdbc Statement对象的void setQueryTimeout(int seconds)方法 | |
testOnBorrow | true | 申请连接时执行validationQuery检测连接是否有效,做了这个配置会降低性能。 |
testOnReturn | false | 归还连接时执行validationQuery检测连接是否有效,做了这个配置会降低性能。 |
testWhileIdle | false | 建议配置为true,不影响性能,并且保证安全性。申请连接的时候检测,如果空闲时间大于timeBetweenEvictionRunsMillis,执行validationQuery检测连接是否有效。 |
keepAlive | false (1.0.28) | 连接池中的minIdle数量以内的连接,空闲时间超过minEvictableIdleTimeMillis,则会执行keepAlive操作。 |
timeBetweenEvictionRunsMillis | 1分钟(1.0.14) | 有两个含义: 1) Destroy线程会检测连接的间隔时间,如果连接空闲时间大于等于minEvictableIdleTimeMillis则关闭物理连接。 2) testWhileIdle的判断依据,详细看testWhileIdle属性的说明 |
numTestsPerEvictionRun | 30分钟(1.0.14) | 不再使用,一个DruidDataSource只支持一个EvictionRun |
minEvictableIdleTimeMillis | 连接保持空闲而不被驱逐的最小时间 | |
connectionInitSqls | 物理连接初始化的时候执行的sql | |
exceptionSorter | 根据dbType自动识别 | 当数据库抛出一些不可恢复的异常时,抛弃连接 |
filters | 属性类型是字符串,通过别名的方式配置扩展插件,常用的插件有: 监控统计用的filter:stat 日志用的filter:log4j 防御sql注入的filter:wall | |
proxyFilters | 类型是List<com.alibaba.druid.filter.Filter>,如果同时配置了filters和proxyFilters,是组合关系,并非替换关系 |
2. 创建实体及xml映射文件
User.java
@Data
@EqualsAndHashCode(callSuper = false)
@Accessors(chain = true)
public class User extends Model<User> {
private static final long serialVersionUID=1L;
@TableId(value = "user_id", type = IdType.AUTO)
private Long userId;
/**
* 用户名
*/
private String username;
/**
* 账号
*/
private String account;
/**
* 密码
*/
private String password;
/**
* 创建日期
*/
private Date createdDate;
/**
* 创建人
*/
private Long createdBy;
/**
* 修改日期
*/
private Date updatedDate;
/**
* 修改人
*/
private Long updatedBy;
@Override
protected Serializable pkVal() {
return this.userId;
}
}
- 创建
UserMapper.xml
,放在项目resources/mapper
文件夹下
<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE mapper PUBLIC "-//mybatis.org//DTD Mapper 3.0//EN" "http://mybatis.org/dtd/mybatis-3-mapper.dtd">
<mapper namespace="com.springboot.cli.dao.UserMapper">
<!-- 通用查询映射结果 -->
<resultMap id="BaseResultMap" type="com.springboot.cli.domain.User">
<id column="user_id" property="userId" />
<result column="username" property="username" />
<result column="account" property="account" />
<result column="password" property="password" />
<result column="created_date" property="createdDate" />
<result column="created_by" property="createdBy" />
<result column="updated_date" property="updatedDate" />
<result column="updated_by" property="updatedBy" />
</resultMap>
</mapper>
- dao层编写,创建
UserMapper
@Mapper
public interface UserMapper extends BaseMapper<User> {
}
3. 编写业务代码
- 接口文件
IUserService
public interface IUserService extends IService<User> {
}
- 实现类
UserServiceImpl
@Service
public class UserServiceImpl extends ServiceImpl<UserMapper, User> implements IUserService {
}
4. 编写测试接口
IndexController
@RestController
@Slf4j
@RequiredArgsConstructor
public class IndexController {
private final UserServiceImpl userService;
/**
* 查询所有用户
*/
@GetMapping("/list")
public List<User> list() {
return userService.list();
}
}
5. 测试效果
- 启动项目
- druid监控界面地址 账号密码 root/123456
http://localhost:9999/druid/sql.html
- 查询接口
http://localhost:9999/list
如图所示,通过druid监控页面,我们就能实时看到sql的各项执行数据了。