1 JDBC概述
JDBC(Java Database Connectivity)是Java语言提供的一组API,用于在Java应用程序中实现与关系型数据库的连接、查询和数据操作。JDBC允许开发者使用标准的Java代码来执行SQL查询、更新和管理数据库事务,从而实现数据的持久化和检索。
1.1 数据持久化
持久化(persistence):把数据保存到可掉电式存储设备中以供之后使用。大多数情况下,特别是企业级应用,数据持久化意味着将内存中的数据保存到硬盘上加以”固化”,而持久化的实现过程大多通过各种关系数据库来完成。
持久化的主要应用是将内存中的数据存储在关系型数据库中,当然也可以存储在磁盘文件、XML数据文件中。
1.2 Java中的数据存储技术
在Java中,数据库存取技术可分为如下几类:
- JDBC直接访问数据库
- JDO (Java Data Object )技术
- 第三方O/R工具,如Hibernate, Mybatis 等
JDBC是java访问数据库的基石,JDO、Hibernate、MyBatis等只是更好的封装了JDBC。
1.3 JDBC介绍
JDBC(Java Database Connectivity)是一个独立于特定数据库管理系统、通用的SQL数据库存取和操作的公共接口(一组API),定义了用来访问数据库的标准Java类库,(java.sql,javax.sql)使用这些类库可以以一种标准的方法、方便地访问数据库资源。
JDBC为访问不同的数据库提供了一种统一的途径,为开发者屏蔽了一些细节问题。
JDBC的目标是使Java程序员使用JDBC可以连接任何提供了JDBC驱动程序的数据库系统,这样就使得程序员无需对特定的数据库系统的特点有过多的了解,从而大大简化和加快了开发过程。
如果没有JDBC,那么Java程序访问数据库时是这样的:
有了JDBC,Java程序访问数据库时是这样的:
总结如下:
1.4 JDBC体系结构
JDBC接口(API)包括两个层次:
- 面向应用的API:Java API,抽象接口,供应用程序开发人员使用(连接数据库,执行SQL语句,获得结果)。
- 面向数据库的API:Java Driver API,供开发商开发数据库驱动程序用。
JDBC是sun公司提供一套用于数据库操作的接口,java程序员只需要面向这套接口编程即可。不同的数据库厂商,需要针对这套接口,提供不同实现。不同的实现的集合,即为不同数据库的驱动。 ———面向接口编程
1.5 JDBC程序编写步骤
补充:ODBC(Open Database Connectivity,开放式数据库连接),是微软在Windows平台下推出的。使用者在程序中只需要调用ODBC API,由 ODBC 驱动程序将调用转换成为对特定的数据库的调用请求。
2 获取数据库连接
2.1 Driver接口实现类
2.1.1 Driver接口介绍
Driver 接口是所有 JDBC 驱动程序需要实现的接口。这个接口是提供给数据库厂商使用的,不同数据库厂商提供不同的实现。
在程序中不需要直接去访问实现了 Driver 接口的类,而是由驱动程序管理器类(java.sql.DriverManager)去调用这些Driver实现。
com.mysql.cj.jdbc.Driver
是 MySQL 数据库的 JDBC 驱动程序的类名。在较新版本的 MySQL Connector/J 中,包名 com.mysql.cj.jdbc
代表 MySQL Connector/J 使用了新的连接器架构(Connection/Authentication),相对于过去的 com.mysql.jdbc
包,这些新的变化引入了更好的性能、安全性和兼容性。
在IDEA中创建maven项目引入依赖
<dependency>
<groupId>mysql</groupId>
<artifactId>mysql-connector-java</artifactId>
<version>8.0.31</version>
</dependency>
2.1.2 加载JDBC驱动
加载驱动:加载 JDBC 驱动需调用 Class 类的静态方法 forName(),向其传递要加载的 JDBC 驱动的类名
Class.forName("com.mysql.cj.jdbc.Driver");
2.2 JDBC URL
JDBC URL 用于标识一个被注册的驱动程序,驱动程序管理器通过这个 URL 选择正确的驱动程序,从而建立到数据库的连接。
JDBC URL的标准由三部分组成,各部分间用冒号分隔。
- jdbc:子协议:子名称
- 协议:JDBC URL中的协议总是jdbc
- 子协议:子协议用于标识一个数据库驱动程序
- 子名称:一种标识数据库的方法。子名称可以依不同的子协议而变化,用子名称的目的是为了定位数据库提供足够的信息。包含主机名(对应服务端的ip地址),端口号,数据库名
示例:
MySQL的连接URL编写方式:
- jdbc:mysql://主机名称:mysql服务端口号/数据库名称?参数=值&参数=值
- jdbc:mysql://localhost:3306/jdbc_demo
- jdbc:mysql://localhost:3306/jdbc_demo?useUnicode=true&characterEncoding=utf8(如果JDBC程序与服务器端的字符集不一致,会导致乱码,那么可以通过参数指定服务器端的字符集)
- jdbc:mysql://localhost:3306/jdbc_demo?user=root&password=123456
2.3 数据库连接方式
方式1:
@Test
public void testConnection1() {
try {
//1.数据库连接的4个基本要素:
String url = "jdbc:mysql://localhost:3306/test";
String user = "root";
String password = "123456";
String driverName = "com.mysql.jdbc.Driver";
//2.加载驱动 (①实例化Driver ②注册驱动)
Class.forName(driverName);
//3.获取连接
Connection conn = DriverManager.getConnection(url, user, password);
System.out.println(conn);
} catch (Exception e) {
e.printStackTrace();
}
}
方式2:
@Test
public void testConnection5() throws Exception {
//1.加载配置文件
InputStream in = ClassLoader.class.getClassLoader().getResourceAsStream("jdbc.properties");
Properties pros = new Properties();
pros.load(in);
//2.读取配置信息
String user = pros.getProperty("user");
String password = pros.getProperty("password");
String url = pros.getProperty("url");
String driverClass = pros.getProperty("driverClass");
//3.加载驱动
Class.forName(driverClass);
//4.获取连接
Connection conn = DriverManager.getConnection(url,user,password);
System.out.println(conn);
}
其中,配置文件声明在工程的src目录下,如图所示:
内容如下:
user=root
password=123456
url=jdbc:mysql://localhost:3306/test(数据库名)
driverClass=com.mysql.cj.jdbc.Driver
说明:使用配置文件的方式保存配置信息,在代码中加载配置文件
使用配置文件的好处:
①实现了代码和数据的分离,如果需要修改配置信息,直接在配置文件中修改,不需要深入代码。
②如果修改了配置信息,省去重新编译的过程。
3 使用PreparedStatement实现CRUD操作
3.1 操作和访问数据库
数据库连接被用于向数据库服务器发送命令和 SQL 语句,并接受数据库服务器返回的结果。其实一个数据库连接就是一个Socket连接。
在 java.sql 包中有 3 个接口分别定义了对数据库的调用的不同方式:
- Statement:用于执行静态 SQL 语句并返回它所生成结果的对象。
- PrepatedStatement:SQL 语句被预编译并存储在此对象中,可以使用此对象多次高效地执行该语句。
- CallableStatement:用于执行 SQL 存储过程
3.2 使用Statement操作数据表的弊端
问题一:存在拼串操作,繁琐
问题二:存在SQL注入问题
SQL 注入是利用某些系统没有对用户输入的数据进行充分的检查,而在用户输入数据中注入非法的SQL 语句段或命令。
以下是一个简单的SQL注入示例:
SELECT * FROM users WHERE username = '' OR '1'='1' AND password = '' OR '1'='1';
因为 ‘1’=‘1’ 始终为真,这个查询将返回所有用户的数据,从而绕过了正常的身份验证。
对于 Java 而言,要防范 SQL 注入,只要用 PreparedStatement 取代Statement 就可以了。
3.3 PreparedStatement的使用
3.3.1 PreparedStatement介绍
可以通过调用 Connection 对象的 preparedStatement(String sql) 方法获取PreparedStatement 对象
- PreparedStatement 接口是 Statement 的子接口,它表示一条预编译过的 SQL 语句
- PreparedStatement 对象所代表的 SQL 语句中的参数用问号(?)来表示,调用 PreparedStatement
对象的 setXxx() 方法来设置这些参数. setXxx() 方法有两个参数,第一个参数是要设置的 SQL 语句中的参数的索引(从 1 开始),第二个是设置的 SQL 语句中的参数的值。
3.3.2 PreparedStatement vs Statement
DBServer会对预编译语句提供性能优化。因为预编译语句有可能被重复调用,所以语句在被DBServer的编译器编译后的执行代码被缓存下来,那么下次调用时只要是相同的预编译语句就不需要编译,只要将参数直接传入编译过的语句执行代码中就会得到执行。
在 Statement 语句中,即使是相同操作但因为数据内容不一样,所以整个语句本身不能匹配,没有缓存语句的意义。事实是没有数据库会对普通语句编译后的执行代码缓存。这样每执行一次都要对传入的语句编译一次。
下面分别用 Statement 和 PreparedStatement 写一个登录示例:
Statement:
public class StatementTest {
/**
* Statement
* - 不能预编译语句,性能差
* - sql语句,拼接字符串,繁琐
* - sql注入问题
*/
public static void main(String[] args) throws Exception {
Scanner sc = new Scanner(System.in);
System.out.println("输入用户名");
String username = sc.nextLine();
System.out.println("输入密码");
String password = sc.nextLine();
String sql = "SELECT * FROM user_table WHERE USER = '" + username + "' AND PASSWORD = '" + password +"'";
Class.forName("com.mysql.cj.jdbc.Driver");
//Connection
Connection conn = DriverManager.getConnection("jdbc:mysql://localhost:3306/test", "root", "123456");
//Statement
Statement st = conn.createStatement();
//ResultSet
ResultSet rs = st.executeQuery(sql);
if (rs.next()) {
System.out.println("登录成功");
} else {
System.out.println("登录失败");
}
//关闭连接
rs.close();
st.close();
conn.close();
}
}
sql注入现象:
PreparedStatement :
public class PrepareStatementTest {
public static void main(String[] args) throws Exception {
Scanner sc = new Scanner(System.in);
System.out.println("输入用户名");
String username = sc.nextLine();
System.out.println("输入密码");
String password = sc.nextLine();
String sql = "SELECT * FROM user_table WHERE USER = ? AND PASSWORD = ?";
Class.forName("com.mysql.cj.jdbc.Driver");
//Connection
Connection conn = DriverManager.getConnection("jdbc:mysql://localhost:3306/test", "root", "123456");
//PrepareStatement
PreparedStatement ps = conn.prepareStatement(sql);
ps.setString(1, username);
ps.setString(2, password);
//ResultSet
ResultSet rs = ps.executeQuery();
if (rs.next()) {
System.out.println("登录成功");
} else {
System.out.println("登录失败");
}
//关闭连接
rs.close();
ps.close();
conn.close();
}
}
3.4 ResultSet和ResultSetMetaData
3.4.1 ResultSet
- 查询需要调用PreparedStatement 的 executeQuery() 方法,查询结果是一个ResultSet 对象
- ResultSet 对象以逻辑表格的形式封装了执行数据库操作的结果集,ResultSet 接口由数据库厂商提供实现
- ResultSet 返回的实际上就是一张数据表。有一个指针指向数据表的第一条记录的前面。
- ResultSet 对象维护了一个指向当前数据行的游标,初始的时候,游标在第一行之前,可以通过 ResultSet 对象的 next() 方法移动到下一行。调用 next()方法检测下一行是否有效。若有效,该方法返回 true,且指针下移。相当于Iterator对象的 hasNext() 和 next() 方法的结合体。
- 当指针指向一行时, 可以通过调用 getXxx(int index) 或 getXxx(int columnName) 获取每一列的值。
○ 例如: getInt(1), getString(“name”)
○ 注意:Java与数据库交互涉及到的相关Java API中的索引都从1开始。 - ResultSet 接口的常用方法:
boolean next()
getString()
3.4.2 ResultSetMetaData
可用于获取关于 ResultSet 对象中列的类型和属性信息的对象。
ResultSetMetaData meta = rs.getMetaData();
常用方法:
- getColumnName(int column):获取指定列的名称
- getColumnLabel(int column):获取指定列的别名
- getColumnCount():返回当前 ResultSet 对象中的列数。
- getColumnTypeName(int column):检索指定列的数据库特定的类型名称。
- getColumnDisplaySize(int column):指示指定列的最大标准宽度,以字符为单位。
- isNullable(int column):指示指定列中的值是否可以为 null。
- isAutoIncrement(int column):指示是否自动为指定列进行编号,这样这些列仍然是只读
的。
问题1:得到结果集后, 如何知道该结果集中有哪些列 ? 列名是什么?
需要使用一个描述 ResultSet 的对象, 即 ResultSetMetaData
问题2:关于ResultSetMetaData
- 如何获取 ResultSetMetaData: 调用 ResultSet 的 getMetaData() 方法即可
- 获取 ResultSet 中有多少列:调用 ResultSetMetaData 的 getColumnCount() 方法
- 获取 ResultSet 每一列的列的别名是什么:调用 ResultSetMetaData 的getColumnLabel() 方法
3.5 JDBC的CRUD实现
在Java中,通过JDBC(Java Database Connectivity)可以连接数据库并进行CRUD(Create, Read, Update, Delete)操作,即增加、查询、更新和删除数据库中的数据。
3.5.1 程序的分层
Java开发手册推荐的工程的分层:
- dao(data access object):数据访问层(jdbc)
- service:业务逻辑层(调用dao)
- controller:控制层
- entity:实体类,领域模型(persistence object)
3.5.2 Java与SQL对应数据类型转换表
Java类型 | SQL类型 |
---|---|
boolean | BIT |
byte | TINYINT |
short | SMALLINT |
int | INTEGER |
long | BIGINT |
String | CHAR,VARCHAR,LONGVARCHAR |
byte array | BINARY , VAR BINARY |
java.sql.Date | DATE |
java.sql.Time | TIME |
java.sql.Timestamp | TIMESTAMP |
3.5.3 实现CRUD
下面写一个User实体的增删改查
User实体类
public class User {
private Integer id;
private String name;
private String password;
private String address;
private String phone;
public User() {
}
public User(Integer id, String name, String password, String address, String phone) {
this.id = id;
this.name = name;
this.password = password;
this.address = address;
this.phone = phone;
}
public Integer getId() {
return id;
}
public void setId(Integer id) {
this.id = id;
}
public String getName() {
return name;
}
public void setName(String name) {
this.name = name;
}
public String getPassword() {
return password;
}
public void setPassword(String password) {
this.password = password;
}
public String getAddress() {
return address;
}
public void setAddress(String address) {
this.address = address;
}
public String getPhone() {
return phone;
}
public void setPhone(String phone) {
this.phone = phone;
}
@Override
public String toString() {
return "User{" +
"id=" + id +
", name='" + name + '\'' +
", password='" + password + '\'' +
", address='" + address + '\'' +
", phone='" + phone + '\'' +
'}';
}
}
UserDao
public class UserDao {
/**
* 查询所有
* @return
*/
public List<User> findAll() {
List<User> list = new ArrayList<>(10);
String sql = "SELECT `id`, `name`, `password`, `address`, `phone` from user";
Connection conn = null;
PreparedStatement ps = null;
ResultSet rs = null;
try {
conn = DriverManager.getConnection("jdbc:mysql://localhost:3306/test", "root", "123456");
ps = conn.prepareStatement(sql);
rs = ps.executeQuery();
while (rs.next()) {
User user = new User();
user.setId(rs.getInt(1));
user.setName(rs.getString(2));
user.setPassword(rs.getString(3));
user.setAddress(rs.getString("address"));
user.setPhone("phone");
list.add(user);
}
} catch (Exception e) {
e.printStackTrace();
} finally {
try {
if (rs != null && !rs.isClosed()) {
rs.close();
}
} catch (SQLException e) {
e.printStackTrace();
}
try {
if (ps != null && !ps.isClosed()) {
ps.close();
}
} catch (SQLException e) {
e.printStackTrace();
}
try {
if (conn != null && !conn.isClosed()) {
conn.close();
}
} catch (SQLException e) {
e.printStackTrace();
}
}
return list;
}
/**
* 查询主键对应的记录
* @param id
* @return
*/
public User findOne(Integer id) {
User user = new User();
String sql = "SELECT `id`, `name`, `password`, `address`, `phone` from user where id = ?";
Connection conn = null;
PreparedStatement ps = null;
ResultSet rs = null;
try {
conn = DriverManager.getConnection("jdbc:mysql://localhost:3306/test", "root", "123456");
ps = conn.prepareStatement(sql);
ps.setInt(1, id);
rs = ps.executeQuery();
while (rs.next()) {
user.setId(rs.getInt(1));
user.setName(rs.getString(2));
user.setPassword(rs.getString(3));
user.setAddress(rs.getString("address"));
user.setPhone("phone");
}
} catch (Exception e) {
e.printStackTrace();
} finally {
try {
if (rs != null && !rs.isClosed()) {
rs.close();
}
} catch (SQLException e) {
e.printStackTrace();
}
try {
if (ps != null && !ps.isClosed()) {
ps.close();
}
} catch (SQLException e) {
e.printStackTrace();
}
try {
if (conn != null && !conn.isClosed()) {
conn.close();
}
} catch (SQLException e) {
e.printStackTrace();
}
}
return user;
}
/**
* 添加
* @param user
* @return 返回语句影响的函数
*/
public int add(User user) {
int rows = 0;
String sql = "insert into user(`name`, `password`, `address`, `phone`) values(?,?,?,?)";
Connection conn = null;
PreparedStatement ps = null;
ResultSet rs = null;
try {
conn = DriverManager.getConnection("jdbc:mysql://localhost:3306/test", "root", "123456");
ps = conn.prepareStatement(sql);
ps.setString(1, user.getName());
ps.setString(2, user.getPassword());
ps.setString(3, user.getAddress());
ps.setString(4, user.getPhone());
rows = ps.executeUpdate(); //执行修改,返回语句影响的行数
} catch (Exception e) {
e.printStackTrace();
} finally {
try {
if (rs != null && !rs.isClosed()) {
rs.close();
}
} catch (SQLException e) {
e.printStackTrace();
}
try {
if (ps != null && !ps.isClosed()) {
ps.close();
}
} catch (SQLException e) {
e.printStackTrace();
}
try {
if (conn != null && !conn.isClosed()) {
conn.close();
}
} catch (SQLException e) {
e.printStackTrace();
}
}
return rows;
}
/**
* 删除
* @param id
* @return 返回语句影响的函数
*/
public int delete(Integer id) {
int rows = 0;
String sql = "delete from user where id = ?";
Connection conn = null;
PreparedStatement ps = null;
ResultSet rs = null;
try {
conn = DriverManager.getConnection("jdbc:mysql://localhost:3306/test", "root", "123456");
ps = conn.prepareStatement(sql);
ps.setInt(1, id);
rows = ps.executeUpdate(); //执行修改,返回语句影响的行数
} catch (Exception e) {
e.printStackTrace();
} finally {
try {
if (rs != null && !rs.isClosed()) {
rs.close();
}
} catch (SQLException e) {
e.printStackTrace();
}
try {
if (ps != null && !ps.isClosed()) {
ps.close();
}
} catch (SQLException e) {
e.printStackTrace();
}
try {
if (conn != null && !conn.isClosed()) {
conn.close();
}
} catch (SQLException e) {
e.printStackTrace();
}
}
return rows;
}
/**
* 改
* @param user
* @return 返回语句影响的函数
*/
public int update(User user) {
int rows = 0;
String sql = "update user set `name`=?, `password`=?, `address`=?, `phone`=? WHERE `id` = ?";
Connection conn = null;
PreparedStatement ps = null;
ResultSet rs = null;
try {
conn = DriverManager.getConnection("jdbc:mysql://localhost:3306/test", "root", "123456");
ps = conn.prepareStatement(sql);
ps.setString(1, user.getName());
ps.setString(2, user.getPassword());
ps.setString(3, user.getAddress());
ps.setString(4, user.getPhone());
ps.setInt(5, user.getId());
rows = ps.executeUpdate(); //执行修改,返回语句影响的行数
} catch (Exception e) {
e.printStackTrace();
} finally {
try {
if (rs != null && !rs.isClosed()) {
rs.close();
}
} catch (SQLException e) {
e.printStackTrace();
}
try {
if (ps != null && !ps.isClosed()) {
ps.close();
}
} catch (SQLException e) {
e.printStackTrace();
}
try {
if (conn != null && !conn.isClosed()) {
conn.close();
}
} catch (SQLException e) {
e.printStackTrace();
}
}
return rows;
}
}
测试:
public class UserDaoTest {
UserDao userDao = new UserDao();
@Test
public void findAll() {
userDao.findAll().forEach(user -> System.out.println(user));
}
@Test
public void findOne() {
System.out.println(userDao.findOne(4));
}
@Test
public void add() {
User user = new User(null,"xing","123456","beijing","19835555502");
userDao.add(user);
}
@Test
public void delete() {
userDao.delete(7);
}
@Test
public void update() {
User user = new User(5,"xing","321564","beijing","19835555502");
userDao.update(user);
}
}
上面的代码看起来非常的冗余,因此简化代码,写一个JdbcUtil工具类简化连接数据库以及关闭连接操作,代码如下:
public class JdbcUtil {
static String driver;
static String url;
static String user;
static String password;
//在类加载时会执行,且仅会执行一次
static {
InputStream in = ClassLoader.getSystemClassLoader().getResourceAsStream("jdbc.properties");
Properties pro = new Properties();
try {
pro.load(in);
} catch (IOException e) {
throw new RuntimeException(e);
}
driver = pro.getProperty("driverClass");
url = pro.getProperty("url");
user = pro.getProperty("user");
password = pro.getProperty("password");
}
//连接
public static Connection getConnection() throws Exception {
Class.forName(driver);
return DriverManager.getConnection(url, user, password);
}
//关闭
public static void closeResource(Connection conn, PreparedStatement ps, ResultSet rs) {
try {
if( rs != null && !rs.isClosed()){
rs.close();
}
} catch (SQLException e) {
e.printStackTrace();
}
try {
if( ps != null && !ps.isClosed()){
ps.close();
}
} catch (SQLException e) {
e.printStackTrace();
}
try {
if( conn != null && !conn.isClosed()){
conn.close();
}
} catch (SQLException e) {
e.printStackTrace();
}
}
}
写一个BaseDao(Dao层的基类,把Dao层重复的代码逻辑放到BaseDado中,减少开发)简化增、删、改、查操作,然后让UserDao继承,代码如下:
public class BaseDao<T> {
Class<T> clazz;
{
//获取当前BaseDao的子类继承的父类中的第一个泛型
// - this = UserDao extends BaseDao<User>
// - this = OrderDao extends BaseDao<Order>
Type genericSuperclass = this.getClass().getGenericSuperclass();
ParameterizedType paramType = (ParameterizedType) genericSuperclass;
Type[] typeArguments = paramType.getActualTypeArguments();//获取了父类的泛型参数
clazz = (Class<T>) typeArguments[0];//泛型的第一个参数
}
//查询所有
public List<T> findList(String sql, Object... params) {
List<T> list = new ArrayList<>(10);
Connection conn = null;
PreparedStatement ps = null;
ResultSet rs = null;
try {
conn = JdbcUtil.getConnection();
ps = conn.prepareStatement(sql);
//处理查询条件
for (int i = 0; i < params.length; i++) {
ps.setObject(i + 1, params[i]);
}
rs = ps.executeQuery();
//查询结果的元数据(列名,类的类型,类数量...)
ResultSetMetaData metaData = rs.getMetaData();
int columnCount = metaData.getColumnCount(); //多少列
while (rs.next()) {
T instance = clazz.newInstance();
for (int i = 0; i < columnCount; i++) {
//列的值
Object value = rs.getObject(i + 1);
//列名(约定:列名等于属性名)
String name = metaData.getColumnLabel(i + 1);
Field field = clazz.getDeclaredField(name);
field.setAccessible(true);
field.set(instance, value);
}
list.add(instance);
}
} catch (Exception e) {
e.printStackTrace();
}finally {
JdbcUtil.closeResource(conn,ps,rs);
}
return list;
}
//查询一个
public T findOne(String sql, Object... params) {
T instance = null;
Connection conn = null;
PreparedStatement ps = null;
ResultSet rs = null;
try {
conn = JdbcUtil.getConnection();
ps = conn.prepareStatement(sql);
//处理查询条件
for (int i = 0; i < params.length; i++) {
ps.setObject(i + 1, params[i]);
}
rs = ps.executeQuery();
//查询结果的元数据(列名,类的类型,类数量...)
ResultSetMetaData metaData = rs.getMetaData();
int columnCount = metaData.getColumnCount(); //多少列
while (rs.next()) {
instance = clazz.newInstance();
for (int i = 0; i < columnCount; i++) {
//列的值
Object value = rs.getObject(i + 1);
//列名(约定:列名等于属性名)
String name = metaData.getColumnLabel(i + 1);
Field field = clazz.getDeclaredField(name);
field.setAccessible(true);
field.set(instance, value);
}
}
} catch (Exception e) {
e.printStackTrace();
}finally {
JdbcUtil.closeResource(conn,ps,rs);
}
return instance;
}
//增删改
public int update(String sql, Object... params){
int rows = 0;
Connection conn = null;
PreparedStatement ps = null;
ResultSet rs = null;
try {
conn = JdbcUtil.getConnection();
ps = conn.prepareStatement(sql);
for (int i = 0; i < params.length; i++) {
ps.setObject(i + 1, params[i]);
}
rows = ps.executeUpdate(); //执行修改,返回语句影响的行数
} catch (Exception e) {
e.printStackTrace();
} finally {
JdbcUtil.closeResource(conn, ps, rs);
}
return rows;
}
}
再来看一下UserDao
public class UserDao extends BaseDao<User> {
//查询所有
public List<User> findAll(){
String sql = "select `id`, `name`, `password`, `address`, `phone` from user";
return super.findList(sql);
}
//查询一个
public User findOne(Integer id) {
String sql = "SELECT `id`, `name`, `password`, `address`, `phone` from user where id = ?";
return super.findOne(sql,id);
}
//增
public int add(User user){
String sql = "insert into user (`name`, `password`, `address`, `phone`) values (?,?,?,?)";
return super.update(sql,user.getName(),user.getPassword(),user.getAddress(),user.getPhone());
}
//删
public int delete(Integer id){
String sql = "delete from user where id = ?";
return super.update(sql,id);
}
//改
public int update(User user){
String sql = "update user set `name`=?, `password`=?, `address`=?, `phone`=? WHERE `id` = ?";
return super.update(sql,user.getName(),user.getPassword(),user.getAddress(),user.getPhone(),user.getId());
}
}
这样看起来,代码简洁多了。
4 MySQL BLOB类型
4.1 介绍
在MySQL中,BLOB是一个二进制大型对象,是一个可以存储大量数据的容器,它能容纳不同大小的数据。它可以用来存储各种类型的二进制数据,例如图像、音频、视频、文档等。插入BLOB类型的数据必须使用PreparedStatement,因为BLOB类型的数据无法使用字符串拼接写的。
- MySQL的四种BLOB类型(除了在存储的最大信息量上不同外,他们是等同的)
实际使用中根据需要存入的数据大小定义不同的BLOB类型。需要注意的是:如果存储的文件过大,数据库的性能会下降。
如果在指定了相关的Blob类型以后,还报错:xxx too large,那么在mysql的安装目录下,找到my.ini文件加上如下的配置参数: max_allowed_packet=16M。在修改了my.ini文件之后,需要重新启动mysql服务。
4.2 向数据表中插入大数据类型
插入a.jpg,如图所示:
代码如下:
@Test
public void test1(){
String sql = "insert into customers(name,email,birth,photo) values (?,?,?,?)";
Connection conn = null;
PreparedStatement ps = null;
ResultSet rs = null;
FileInputStream in = null;
try {
conn = JdbcUtil.getConnection();
ps = conn.prepareStatement(sql);
ps.setString(1,"kong");
ps.setString(2,"837541653@qq.com");
ps.setDate(3,new Date(new java.util.Date().getTime()));
in = new FileInputStream("a.jpg");
ps.setBlob(4,in);
ps.executeUpdate();
} catch (Exception e) {
e.printStackTrace();
}finally {
JdbcUtil.closeResource(conn, ps, rs);
try {
in.close();
} catch (IOException e) {
e.printStackTrace();
}
}
}
运行结果,查看数据库表:
4.3 修改数据表中的Blob类型字段
修改图片为b.jpg,如图:
代码如下:
@Test
public void test2(){
String sql = "update customers set photo = ? where id = ?";
Connection conn = null;
PreparedStatement ps = null;
ResultSet rs = null;
InputStream in = null;
try {
conn = JdbcUtil.getConnection();
ps = conn.prepareStatement(sql);
ps.setInt(2,20);
in = new FileInputStream("b.jpg");
ps.setBlob(1,in);
ps.executeUpdate();
} catch (Exception e) {
e.printStackTrace();
}finally {
JdbcUtil.closeResource(conn, ps, rs);
try {
in.close();
} catch (IOException e) {
e.printStackTrace();
}
}
}
运行结果:
4.4 从数据表中读取大数据类型
读取b.jpg输出到项目下名字为c.jpg
代码如下:
@Test
public void test2(){
String sql = "select id,name,email,birth,photo from customers where id = ?";
Connection conn = null;
PreparedStatement ps = null;
ResultSet rs = null;
InputStream in = null;
FileOutputStream out = null;
try {
conn = JdbcUtil.getConnection();
ps = conn.prepareStatement(sql);
ps.setInt(1,20);
rs = ps.executeQuery();
if(rs.next()){
System.out.println(rs.getInt(1));
System.out.println(rs.getString(2));
//读取blob
Blob blob = rs.getBlob(5);
in = blob.getBinaryStream();
out = new FileOutputStream("c.jpg");
int length = -1;
byte[] buffer = new byte[1024];
while ((length = in.read(buffer)) != -1){
out.write(buffer,0,length);
}
}
} catch (Exception e) {
e.printStackTrace();
}finally {
JdbcUtil.closeResource(conn, ps, rs);
try {
in.close();
} catch (IOException e) {
e.printStackTrace();
}
try {
out.close();
} catch (IOException e) {
e.printStackTrace();
}
}
}
运行结果:
5 批量插入
当需要成批插入或者更新记录时,可以采用Java的批量更新机制,这一机制允许多条语句一次性提交给数据库批量处理,通常情况下比单独提交处理更有效率。
JDBC的批量处理语句包括下面三个方法:
- addBatch(String):添加需要批量处理的SQL语句或是参数;
- executeBatch():执行批量处理语句;
- clearBatch():清空缓存的数据
通常我们会遇到两种批量执行SQL语句的情况:
- 多条SQL语句的批量处理
- 一个SQL语句的批量传参
下面是使用批量插入和正常插入的对比:
修改jdbc.properties配置为:
user=root
password=kdx010908
url=jdbc:mysql://localhost:3306/test?useUnicode=true&characterEncoding=utf8&rewriteBatchedStatements=true
driverClass=com.mysql.cj.jdbc.Driver
public class BatchDemo {
@Test
public void test1() throws Exception {
long start = System.currentTimeMillis();
Connection conn = JdbcUtil.getConnection();
conn.setAutoCommit(false);
String sql = "insert into goods(name) values(?)";
PreparedStatement ps = conn.prepareStatement(sql);
for(int i = 1; i <= 200000; i++){
ps.setString(1, "name_" + i);
ps.executeUpdate();
}
conn.commit();
long end = System.currentTimeMillis();
System.out.println("花费的时间为:" + (end - start));//27171
JdbcUtil.closeResource(conn, ps, null);
}
@Test
public void test2() throws Exception {
long start = System.currentTimeMillis();
Connection conn = JdbcUtil.getConnection();
conn.setAutoCommit(false);
String sql = "insert into goods(name) values(?)";
PreparedStatement ps = conn.prepareStatement(sql);
for(int i = 1; i <= 200000; i++){
ps.setString(1, "name_" + i);
ps.addBatch(); //添加语句到Batch,攒sql语句
if (i % 10000 == 0) {
ps.executeBatch(); //每500个语句,批量执行一次
ps.clearBatch(); //清空批量
}
}
conn.commit();
long end = System.currentTimeMillis();
System.out.println("花费的时间为:" + (end - start));//4915
JdbcUtil.closeResource(conn, ps, null);
}
}
由上述示例可知,批量插入比正常插入快得多。
6 数据库连接池
6.1 JDBC数据库连接池的必要性
在使用开发基于数据库的web程序时,传统的模式基本是按以下步骤:
- 在主程序(如servlet、beans)中建立数据库连接
- 进行sql操作
- 断开数据库连接
这种模式开发,存在的问题:
- 普通的JDBC数据库连接使用 DriverManager 来获取,每次向数据库建立连接的时候都要Connection 加载到内存中,再验证用户名和密码(得花费0.05s~1s的时间)。需要数据库连接的时候,就向数据库要求一个,执行完成后再断开连接。这样的方式将会消耗大量的资源和时间。数据库的连接资源并没有得到很好的重复利用。若同时有几百人甚至几千人在线,频繁的进行数据库连接操作将占用很多的系统资源,严重的甚至会造成服务器的崩溃。
- 对于每一次数据库连接,使用完后都得断开。否则,如果程序出现异常而未能关闭,将会导致
数据库系统中的内存泄漏,最终将导致重启数据库。(回忆:何为Java的内存泄漏?) - 这种开发不能控制被创建的连接对象数,系统资源会被毫无顾及的分配出去,如连接过多,也
可能导致内存泄漏,服务器崩溃。
6.2 数据库连接池技术
为解决传统开发中的数据库连接问题,可以采用数据库连接池技术。
- 数据库连接池的基本思想:就是为数据库连接建立一个“缓冲池”。预先在缓冲池中放入一定数量的连接,当需要建立数据库连接时,只需从“缓冲池”中取出一个,使用完毕之后再放回去。
- 数据库连接池负责分配、管理和释放数据库连接,它允许应用程序重复使用一个现有的数据库连接,而不是重新建立一个。
- 数据库连接池在初始化时将创建一定数量的数据库连接放到连接池中,这些数据库连接的数量是由最小数据库连接数来设定的。无论这些数据库连接是否被使用,连接池都将一直保证至少拥有这么多的连接数量。连接池的最大数据库连接数量限定了这个连接池能占有的最大连接数,当应用程序向连接池请求的连接数超过最大连接数量时,这些请求将被加入到等待队列中。
工作原理:
数据库连接池技术的优点:
- 资源重用
由于数据库连接得以重用,避免了频繁创建,释放连接引起的大量性能开销。在减少系统消耗的基础上,另一方面也增加了系统运行环境的平稳性。 - 更快的系统反应速度
数据库连接池在初始化过程中,往往已经创建了若干数据库连接置于连接池中备用。此时连接的初始化工作均已完成。对于业务请求处理而言,直接利用现有可用连接,避免了数据库连接初始化和释放过程的时间开销,从而减少了系统的响应时间。 - 新的资源分配手段
对于多应用共享同一数据库的系统而言,可在应用层通过数据库连接池的配置,实现某一应用最大可用数据库连接数的限制,避免某一应用独占所有的数据库资源。 - 统一的连接管理,避免数据库连接泄漏
在较为完善的数据库连接池实现中,可根据预先的占用超时设定,强制回收被占用连接,从而避免了常规数据库连接操作中可能出现的资源泄露。
6.3 多种开源的数据库连接池
JDBC 的数据库连接池使用 javax.sql.DataSource 来表示,DataSource 只是一个接口,该接口通常由服务器(Weblogic, WebSphere, Tomcat)提供实现,也有一些开源组织提供实现:
- DBCP 是Apache提供的数据库连接池。tomcat 服务器自带dbcp数据库连接池。速度相对c3p0较快,但因自身存在BUG,Hibernate3已不再提供支持。
- C3P0 是一个开源组织提供的一个数据库连接池,速度相对较慢,稳定性还可以。Hibernate官方推荐使用。
- Druid 是阿里提供的数据库连接池,据说是集DBCP 、C3P0 、Proxool 优点于一身的数据库连接池,但是速度不确定是否有BoneCP快。
DataSource 通常被称为数据源,它包含连接池和连接池管理两个部分,习惯上也经常把DataSource 称为连接池。DataSource用来取代DriverManager来获取Connection,获取速度快,同时可以大幅度提高数据库访问速度。
注意:
数据源和数据库连接不同,数据源无需创建多个,它是产生数据库连接的工厂,因此整个应用只需要一个数据源即可。
当数据库访问结束后,程序还是像以前一样关闭数据库连接:conn.close(); 但conn.close()并没有关闭数据库的物理连接,它仅仅把数据库连接释放,归还给了数据库连接池。
6.3.1 C3P0数据库连接池
在pom.xml导入依赖
<dependency>
<groupId>com.mchange</groupId>
<artifactId>c3p0</artifactId>
<version>0.9.2.1</version>
</dependency>
使用c3p0数据库连接池的配置文件方式获取数据库的连接:
在resources下配置文件为:c3p0-config.xml
<?xml version="1.0" encoding="UTF-8"?>
<c3p0-config>
<named-config name="c3p0">
<!-- 获取连接的4个基本信息 -->
<property name="user">root</property>
<property name="password">kdx010908</property>
<property name="jdbcUrl">jdbc:mysql:///test</property>
<property name="driverClass">com.mysql.cj.jdbc.Driver</property>
<!-- 涉及到数据库连接池的管理的相关属性的设置 -->
<!-- 若数据库中连接数不足时, 一次向数据库服务器申请多少个连接 -->
<property name="acquireIncrement">5</property>
<!-- 初始化数据库连接池时连接的数量 -->
<property name="initialPoolSize">5</property>
<!-- 数据库连接池中的最小的数据库连接数 -->
<property name="minPoolSize">5</property>
<!-- 数据库连接池中的最大的数据库连接数 -->
<property name="maxPoolSize">10</property>
<!-- C3P0 数据库连接池可以维护的 Statement 的个数 -->
<property name="maxStatements">20</property>
<!-- 每个连接同时可以使用的 Statement 对象的个数 -->
<property name="maxStatementsPerConnection">5</property>
</named-config>
</c3p0-config>
代码:
@Test
public void test() throws SQLException {
DataSource cpds = new ComboPooledDataSource("c3p0");
Connection conn = cpds.getConnection();
System.out.println(conn);
}
不使用c3p0数据库连接池的配置文件方式获取数据库的连接:
//使用C3P0数据库连接池的方式,获取数据库的连接:不推荐
@Test
public void test1() throws Exception{
ComboPooledDataSource cpds = new ComboPooledDataSource();
cpds.setDriverClass("com.mysql.jdbc.Driver");
cpds.setJdbcUrl("jdbc:mysql://localhost:3306/test");
cpds.setUser("root");
cpds.setPassword("kdx010908");
Connection conn = cpds.getConnection();
System.out.println(conn);
}
6.3.2 DBCP数据库连接池
DBCP 是 Apache 软件基金组织下的开源连接池实现,该连接池依赖该组织下的另一个开源系统:Common-pool。如需使用该连接池实现,应在系统中增加如下两个 jar 文件:
- Commons-dbcp.jar:连接池的实现
- Commons-pool.jar:连接池实现的依赖库
Tomcat 的连接池正是采用该连接池来实现的。该数据库连接池既可以与应用服务器整合使用,也
可由应用程序独立使用。
配置属性说明:
在pom.xml导入依赖:
<dependency>
<groupId>org.apache.tomcat</groupId>
<artifactId>dbcp</artifactId>
<version>6.0.29</version>
</dependency>
使用dbcp数据库连接池的配置文件方式获取数据库的连接:
在resources下的配置文件为:dbcp.properties
driverClassName=com.mysql.jdbc.Driver
url=jdbc:mysql:///test
username=root
password=kdx010908
initialSize=10
代码:
//推荐:使用配置文件
@Test
public void test1() throws Exception{
Properties pros = new Properties();
InputStream is = ClassLoader.getSystemClassLoader().getResourceAsStream("dbcp.properties");
pros.load(is);
DataSource source = BasicDataSourceFactory.createDataSource(pros);
Connection conn = source.getConnection();
System.out.println(conn);
}
不使用dbcp数据库连接池的配置文件方式获取数据库的连接:
//不推荐
@Test
public void testGetConnection() throws SQLException {
//创建了DBCP的数据库连接池
BasicDataSource source = new BasicDataSource();
//设置基本信息
source.setDriverClassName("com.mysql.jdbc.Driver");
source.setUrl("jdbc:mysql:///test");
source.setUsername("root");
source.setPassword("kdx010908");
//还可以设置其他涉及数据库连接池管理的相关属性:
source.setInitialSize(10);
source.setMaxActive(10);
Connection conn = source.getConnection();
System.out.println(conn);
}
6.3.3 Druid(德鲁伊)数据库连接池
Druid是阿里巴巴开源平台上一个数据库连接池实现,它结合了C3P0、DBCP、Proxool等DB池的优点,同时加入了日志监控,可以很好的监控DB池连接和SQL的执行情况,可以说是针对监控而生的DB连接池,可以说是目前最好的连接池之一。
在pom.xml导入依赖:
<dependency>
<groupId>com.alibaba</groupId>
<artifactId>druid</artifactId>
<version>1.2.8</version>
</dependency>
使用Druid数据库连接池的配置文件方式获取数据库的连接:
在resources下的配置文件为:druid.properties
url=jdbc:mysql:///test
username=root
password=kdx010908
driverClassName=com.mysql.jdbc.Driver
initialSize=10
maxActive=10
代码:
@Test
public void test1() throws Exception{
Properties pros = new Properties();
InputStream is = ClassLoader.getSystemClassLoader().getResourceAsStream("druid.properties");
pros.load(is);
DataSource source = DruidDataSourceFactory.createDataSource(pros);
Connection conn = source.getConnection();
System.out.println(conn);
}