1、初识MySQL
javaEE:企业级java开发 Web
前端(页面:展示:数据!)
后台(连接点:连接数据库JDBC,链接前端(控制,控制视图的跳转,和给前端传递数据))
数据库(存数据,Txt,Excel,word)
只会写代码,学好数据库,基本混饭吃
操作系统,数据结构与算法!当一个不错的程序员!
离散数学,数字电路,体系结构,编译原理+实战经验
1.1、为什么学习数据库
- 岗位需求
- 现在的世界,大数据时代,得数据库者的天下
- 被迫需求:存数据
- 数据库是所有软件体系中最核心的存在DBA
1.2、什么是数据库
数据库(DB,DataBase)
概念:数据仓库,软件,安装在操作系统(window,linux,mac、…)之上!SQL,可以存储大量的数据,500万
作用:存储数据,管理数据
1.3、数据库分类
关系型数据库
- MySQL,Oracle,Sql Server,DB2,SQLlite
- 通过表和表之间,行和列之间的关系进行数据的存储,学员信息表,考勤表…
非关系型数据库:
- Redis,MongDB
- 非关系型数据库,对象存储,通过对象的自身的属性来决定
DBMS(数据库管理系统)
- 数据库的管理软件,科学有效的管理我们的数据,维护和获取数据;
- MySQL,本质是一个数据管理系统
1.4、MySQL
MySQ是一个关系型数据管理系统
前世:瑞典MySQL AB公司
今生:属于Oracle旗下公司
MySQL是最好的RDBMS(关系型数据库管理系统)应用软件之一,
开软的数据库软件~
体积小,速度快,总体拥有成本低,招人成本比较低,所有人必须会~
中小型网站,或者大型网站,集群!
官网:
5.7稳
8.0
安装建议:
- 尽量不要使用exe,注册表
- 尽可能使用压缩包安装
1.5、安装MySQL
- 解压
- 把这个包放到自己的电脑环境目录下~
- 配置环境变量
- 新建mysql配置文件ini
- 启动管理员模式下的CMD,运行所有命令
- mysqld –install (安装mysql)报错缺少命令错误
下载微软常用运行库合集
- mysqld --initialize-insecure --user=mysql (初始化数据文件)Errcode: 2 - No such file or directory(ini配置文件地址使用双斜杠)
- mysqld –install (安装mysql)报错缺少命令错误
- 启动mysql进去修改密码
- 进入mysql通过命令行(-p后面不要加空格),修改密码(sql语句后面一定要加分号)
- 删除ini中的跳过密码
- 重启mysql,连接测试,如果连接成功就ok了
sc delete mysql 清空服务
1.6、安装SQLyog
1.7、连接数据库
命令行连接
mysql -uroot -p123456
flush privileges;刷新权限
--所有的语句都使用分号结尾
show databases;--查看所有数据库
use school;--切换数据库 use 数据库名
database changed
show tables;--查看数据库中所有的表
describe student;--显示数据库中所有的表的信息
create database westos;--创建一个数据库
exit;--退出连接
--单行注释(sql本来的注释)
/*
多行注释
*/
数据库xxx语言CRUD增删改查!
DDL 定义
DML 操作
DQL 查询
DCL 控制
2、操作数据库
操作数据库>操作数据库中的表>操作数据库中表的数据
mysql关键字不区分大小写
学习思路
- 对照sqlyog可视化历史记录查看sql
- 固定的语法或者关键字必须强行记住
2.1、操作数据库
-
创建数据库
CREATE DATABASE [IF NOT EXISTS] westos;
-
删除数据库
DROP DATABASE [IF EXISTS] westos;
-
使用数据库
--tab键上面,如果你的表名或者字段名是一个特殊字符,就不会高亮 USE `school`
-
查看数据库
SHOW DATABASES --查看所有的数据库
2.2、数据库的列类型
数值
- tinyint 十分小的数据 一个字节
- sma 较小的数据 2个字节
- mediumint 中等大小的数据 3个字节
- int 4个字节
- bigint 较大的数据 8个字节
- float 浮点数 4个字节
- double 浮点数 8个字节
- decimal 字符串形式的浮点数 金融计算的用
字符串
- char 字符串固定大小的 0-255
- varchar 可变字符串 0-65535 常用的 String
- tinytext 微型文本 2^8-1
- text 文本串 2^16-1 保存大文本
时间日期
- date YYYY-MM-DD日期格式
- time HH:mm:ss 时间格式
- datetime YYYY-MM-DD HH : mm:ss最常用的时间格式
- timestamp 时间戳 1970-1-1到现在的毫秒
- year 年份表示
null
- 没有值,未知
- 注意不要使用NULL进行运算,结果为NULL
2.3、数据库的字段属性(重点)
Unsigned:
- 无符号的整数
- 声明该列不能声明为负数
zerofill:
- 0填充
- 不足的位数使用0来填充
自增
- 通常理解为自增,自动在上一条记录的基础上加一(默认)
- 通常可以用来设计唯一的主键 index 必须是整数类型
- 可以自定义设计主键自增的起始值和步长
非空 NULL not null
- 假设设置为not null ,如果不给它赋值,就会报错
- NULL
默认
- 设置默认参数
/*每个表,都必须存在以下五个字段!
主键 id
乐观锁 version
伪删除 is_delete
创建时间 gmt_create
修改时间 gmt_update
*/
2.4、创建一个数据库表
--使用引文(),表的名称和字段尽量使用``括起来
--字符串使用单引号括起来
--所有的语句后面加,最后一个不用加
格式
CREATE TABLE [IF NOT EXISTS] 表名(
'字段名' 列类型[属性][索引][注释],
......
)[表类型][字符集设置][注释]
SHOW CREATE DATABASE school --查看创建数据库的语句
SHOW CREATE TABLE student --查看数据表的定义语句
DESC student --查看表的结构
2.5、数据表的类型
INNODB 默认使用
MYISAN 早些年使用的
MYISAN | INNODB | |
---|---|---|
事务支持 | 不支持 | 支持 |
数据行锁定 | 不支持 | 支持 |
外键约束 | 不支持 | 支持 |
全文索引 | 支持 | 不支持 |
表空间的大小 | 较小 | 较大2倍 |
常规的使用操作
- MY节约空间 速度较快
- IN安全性高,事务的处理,多表多用户操作
在物理空间存在的位置
所有的数据文件都存在data目录文件下
本质还是文件存储
MySQL引擎在物理文件上的区别
- InnoDB 在数据库中只有一个*.frm文件,以及上级目录下的ibdata文件
- MYISAM对应文件
- *.frm-表结构的定义文件
- *.MYD数据文件(data)
- *.MYI索引文件(index)
设置数据库的字符集编码
CHARSET=utf-8
不设置的话,会是mysql默认的字符集编码~(不支持中文)
MySQL的默认编码是Latin1,不支持中文
在my.ini中配置默认的编码(不建议)
character-set-server=utf8
2.6、修改和删除
ALTER TABLE teacher RENAME AS teacher1--修改表名
--ALTER TABLE 旧表名 RENAME AS 新表名
ALTER TABLE teacher1 ADD age INT(11)--添加表的字段
--ALTER TABLE 表名 ADD 字段名 列属性
ALTER TABLE teacher MODIFY age VARCHAR(11)--修改约束
--ALTER TABLE 表名 MODIFY 字段名 列属性[]
ALTER TABLE teacher CHANGE age age1 INT(1)--字段重命名
--ALTER TABLE 表名 CHANGE 旧名字 新名字 列属性[]
ALTER TABLE teacher DROP age1--删除表的字段
--ALTER TABLE 表名 DROP 字段名
DROP TABLE IF EXISTS teacher1
--DROP TABLE IF EXISTS teacher1
所有的创建和删除操作尽量加上判断,以免报错
3、MySQL数据管理
3.1、外键
方式一:创建表的时候,增加约束
方式二:创建表成功后,增加约束
删除有外键的表的时候要先删除引用别人的表主表,在删除被引用的表从表
以上的操作都是物理外键,数据库级别的外键,不建议使用(了解即可)
最佳实践
- 数据库就是单纯的表,只用来存数据只有行数据和列字段
- 我们想使用多张表的数据,想使用外键(用程序去实现)
3.2、DML语言 (全部记住)
3.3、添加
insert
语法:insert into 表名[字段名1,...] value ('值',...)
注意事项:
- 字段和字段之间使用英文逗号隔开
- 由于主键自增我们可以省略(如果不写表的字段,他就会一一匹配)
- 字段是可以省的,但是后面的值必须要一一对应,不能少
- 可以同时插入多条数据,values后面的值,需要使用,隔开
(),()
3.4、修改
update
语法:update 表名 set colnum_name = value,[] where[条件]
条件:where 子句运算符id=某个值,大于某个值,在某个区间修改
操作符 | |||
---|---|---|---|
= | |||
<>或!= | |||
< | |||
> | |||
<= | |||
>= | |||
between… and… | |||
and | |||
or |
注意:
- colnum_name是数据库的列
- 条件,筛选的条件,如果没有指定,则会修改所有的列
- value是一个具体的值也可以是变量
- 多个设置的属性之间,使用英文逗号隔开
3.5、删除
delete
语法:delete from 表名[where 条件]
truncate
作用完全清空一个数据库表,表的结构和索引约束不会变
delete和truncate区别
相同点:都能删除数据,都不会删除表结构
不同:
- truncate 重新设置自增列,计数器会归零
- truncate 不会影响事务
了解即可:delete
,重启数据库现象
- innoDB 自增列会从1开始(存在文件当中,断电即失)
- MySAM 继续从上一个自增量开始(存在文件中的,不会丢失)
4、查询数据
4.1、DQL
- 所有的查询操作都用它 Select
- 简单的查询,复杂的查询它都能做
- 数据库中最核心的语言,最重要的语句
- 使用频率最高的语句
SELECT [ALL | DISTINCT]
{*| table.* | [table.field1[as alias1][,table.field2[as alias2]][...]]}
FROM table_name[as table_alias]
[left|right|inner join table_name]--联合查询
[WHERE ...]--指定满足的条件,WHERE不能使用聚合函数
[GROUP BY ...]--指定结果按照哪几个字段来分组
[HAVING]--过滤分组的记录必须满足的次要条件
--分组后不能用WHERE,可以使用聚合函数
[ORDER BY ...]--指定查询记录按照一个或者多个条件排序
[LIMIT {[offset,]row_count|row_countOFFSET offset}];
--指定查询纪录从那条开始,多少条
--[可选]{必选}
4.2、指定查询
select
--查询全部的学生,select 字段 from 表
select * from student
--查询指定字段
select `StudentNO`,`StudentNmae` from student
--别名,给结果起一个名字as 可以给字段起别名,也可以给表起别名
select `StudentNO` as 学号,`StudentNmae` as 学生姓名 from student as s
--函数 Concat(a,b)
select concat('姓名',StudentName) as 新名字 from student
语法:select 字段... from 表
有的时候,列名字不是那么见名知意,我们起别名 as 原名as别名
去重distinct
select * from result --查询全部的考试成绩
select StudengtNo from result --查询有哪些同学参加了考试
select distinct StudentNo from result --发现重复数据去重
数据库的列(表达式)
select version() --查询系统版本(函数)
select 100*3-1 as 计算结果 --用来计算(表达式)
select @@auto_increment_increment --查询自增的步长(变量)
select StudentNo,StudentResult +1 AS '提分后' from result--考试成绩+1分查看
数据库中的表达式:文本值,列,Null,函数,计算表达式,系统变量
select 表达式 form 表
4.3、where条件子句
作用:检索数据中符合条件的值
逻辑运算符
运算符 | 语法 | 描述 |
---|---|---|
and && | a and b a&&b | 逻辑与 |
or || | a or b a||b | 逻辑或 |
Not ! | not a ! a | 逻辑非 |
尽量使用英文
模糊查询:比较运算符
运算符 | 语法 | 描述 |
---|---|---|
is null | is null | 是否为null |
is not null | is not null | 是否不为null |
between | a between b and c | a是否在bc之间 |
like | a like b | SQL匹配a匹配b(类似正则匹配) |
in | a in (a1,a2,…) | a是否为其中一个值 |
4.4、联表查询
join on
where
思路:
- 分析需求,分析查询的字段来自哪些表,(连接查询)
- 确定使用哪种连接查询(7种)
- 确定交叉点(这来个表哪个数据是相同的)
操作 | 描述 |
---|---|
inner join | 如果表中至少有一个匹配,就返回行 |
lleft join | 会从左边中返回所有的值,即使右表中没有匹配 |
right join | 会从右边中返回所有的值,即使左表中没有匹配 |
on是先筛选后关联,where是先关联后筛选
自连接
自己和自己的连接,核心:一张表拆为俩张一样的表即可
4.5、排序和分页
排序(ASC,DESC)
分页(LIMIT 起始下标,显示条数)
- 为什么分页
- 环境数据库压力,给人好的体验,不同于瀑布流
4.6、子查询和嵌套查询
WHERE(这个值是计算出来的)
WHERE(SELECT * FORM )
5、常用函数
5.1、常用函数
5.2、聚合函数(常用)
5.3、数据库级别数据加密(扩展)
什么是MD5?
主要增强算法复杂度和不可逆性。
MD5不可逆,具体的值和md5是一样的
MD5破解网站的原理,背后有个字典,MD5加密后的词,加密前的值
6、事务
一组SQL语句放在一个批次中去执行
事务原则:ACID原则
原子性(Atomicity):不可再分,要么都成功,要么都失败
一致性(Consistency):事务前后的数据完整性保持一致
持久性(Durability):事务一旦提交则不可逆
隔离性(Isolation):多个事务间互相隔离
脏读:
指一个事务读取了另一个事务未提交的数据
不可重复读:
在一个事务内读取表中的某一行数据,多次读取结果不同
虚读(幻读)
指在一个事务内读取到了别的事务插入的数据,导致前后读取不一致
--mysql是默认开启事务自动提交的
SET autocommit = 0--关闭
SET autocommit = 1--开启(默认的)
START TRANSACTION --标记一个事务的开启
COMMIT --提交:持久化(成功)
ROLLBACK --回滚,回到原来的样子(失败)
--了解
SAVEPOINT 保存点名--设置一个事务的保存点
ROLLBACK TO SAVEPOINT 保存点名--回滚到保存点
RELEASE SAVEPOINT 保存点名--删除保存点
7、索引
MySQL官方对索引的定义为:索引(index)是帮助MySQL高效获取数据的数据结构
7.1、索引的分类
在一个表中,主键索引只能有一个,唯一索引可以有多个
- 主键索引(PRIMARY KEY)
- 唯一的标识,主键不重复,只能有一个列作为索引
- 唯一索引(UNIQUE KEY)
- 避免重复的列出现,唯一索引可以重复,多个列都可以标识为唯一索引
- 常规索引(KEY/INDEX)
- 默认的,index,key关键字来设置
- 全文索引(FULLTEXT)
- 在特定的数据索引引擎下才有,MySAM
- 快速定位数据
基础语法
--1.在创建索引的时候给字段增加索引
--2.创建完毕后,增加索引
--显示所有的索引信息
SHOW INDEX FROM student
--增加一个全文索引(索引名)列名
ALTER TABLE school.student ADD FULLTEXT INDEX studentName(studentName);
--EXPLAIN分析sql执行的状况
EXPLAIN SELECT = FROM student --全文索引
EXPLAIN SELECT = FROM student WHERE MATCH(studentName)AGAINST("刘");
索引在小数据的时候作用不大,在大数据的时候区别很明显
7.2、索引原则
- 索引不是越多越好
- 不要对进程变动数据加索引
- 小数据量的表不需要加索引
- 索引一般加在常用来查询的字段上
索引的数据结构
Hash类型的索引
Btree:InnoDB 的默认数据结构~
http://blog.codinglabs.org/articles/theory-of-mysql-index.html
8、权限管理和备份
8.1、用户管理
SQLyog可视化管理
SQL 命令
CREATE USER 用户名 IDENTIFIBD BY '密码'--创建用户
SET PASSWORD = PASSWORD('新密码')--修改当前用户密码
SET PASSWORD FOR 用户名 = PASSWORD('新密码')--修改指定用户密码
RENAME USER 用户名 TO 新用户名 --重命名
GRANT ALL PRIVILBOES ON "." TO 用户名--给用户授权
--除了给别人授权,其他权限都有
SHOW GRANTS FOR 用户名 --查询权限
REVOKE ALL PRIVILBOES ON "." TO 用户名--撤销权限
DROP USER 用户名 --删除用户
8.2、MySQL
为什么要备份
- 保证重要的数据不丢失
- 数据转移
MySQL数据库备份的方式
- 直接拷贝物理文件
- 在Sqlyog这种可视化工具手动导出
- 使用命令行导出 mysqldump命令行使用
- `mysqldump -hlocalhost -uroot -p123456 java>d:/b.sql```
- 导入数据库
- 先登录 use 库名:
- source 备份文件:
- 或者
mysql -u -p 库名<备份文件
9、规范数据库设计
9.1、为什么需要设计
当数据库比较复杂的时候,我们就需要设计了
糟糕的数据库设计:
- 数据冗余,浪费空间
- 数据库插入和删除都会麻烦,异常(屏蔽使用物理外键)
- 程序的性能差
良好的数据库设计:
- 节省内存空间
- 保证数据库的完整性
- 方便我们开发系统
软件开发中,关于数据库的设计
- 分析需求:分析业务和需要处理的数据库的需求
- 概要设计:设计关系图E-R图
设计数据库的步骤:
- 收集信息,分析需求
- 标识实体(把需求落实到每个字段)
- 标识实体之间的关系
9.3、三大范式
为什么需要数据规范化
- 信息重复
- 更新异常
- 插入异常
- 无法正常显示消息
- 删除异常
- 丢失有效的信息
三大范式
第一范式
原子性:保证每一列不可再分
第二范式
前提:满足第一范式
每张表只描述一件事情
第三范式
前提:满足第一第二范式
每一列数据都与主键直接相关
规范性和性能的问题
关联查询的表不得超过三张表
- 考虑商业化的需求和目标,(成本,用户体验)数据库的性能更加重要
- 在规范性能的问题的时候,需要适当的考虑一下规范性!
- 故意给某些表增加一些冗余的字段,(从多表查询中变为单表查询)
- 故意增加一些计算列(从大数据量降低为小数据量的查询:索引)
10、JDBC
10.1、数据库驱动
驱动:声卡、显卡、数据库
我们的程序会通过数据库驱动,和数据库打交道
10.2、JDBC
SUN公司为了简化开发人员的(对数据库的统一)操作,提供了一个(java操作数据库的)规范,俗称JDBC
这些规范的实现有厂商去做~
对于开发人员来说,我们只需要掌握JDBC接口的操作即可!
java.sql
javax.sql
还需要导入一个mysql-connector-java-5.1.47.jar
10.3、第一个JDBC程序
- 创建数据库依赖
- 导入数据库驱动
- 编写测试代码
- 加载驱动
- 连接数据库
- 获取执行sql的对象
- 获得返回的结果集
- 释放连接
DriverManager
Class.forName("com.mysql.jdbc.Driver")//固定写法,加载驱动
Connection connection = DriverManager.getConnection(url,username,password);
//连接成功,数据库对象 Connection 代表数据库
connection.rollback()//数据库设置自动提交
connection.commit()//事务提交
connection.setAutoCommit()//事务滚回
URL
String url="jdbc:mysql://localhost:3306/java?
useUnicode=true&characterEncoding=utf8&useSSL=true";
//mysql--3306
//协议:主机地址:端口号/数据库名?参数
//jdbc:mysql://localhost:3306/数据库名?参数&参数;
//oralce--1521
//jdbc:oracle:think@localhost:1521:sid
10.4、Statement执行SQL的对象
statement.executeQuery();//查询操作返回ResultSet
statement.execute();//执行任何SQL
statement.executeUpdata();//更新,插入,删除都是用这个,返回一个受影响的行数
ResultSet 查询的结果集:封装了所有的查询
resultSet.getObject();
resultSet.getString();
resultSet.getInt();
resultSet.getFloat();
resultSet.getData();
...
遍历,指针
resultSet.beforeFirst();//移动到最前面
resultSet.afterLast//移动到最后面
resultSet.next()//移动到下一个数据
resultSet.previous()//移动到前一行
resultSet.absolute(row)//移动到指定行
释放资源
resultSet.close()
statement.close()
connection.close()
编写代码
SQL注入的问题
sql存在漏洞,会被攻击导致数据泄露,SQL会被拼接OR
10.5、PrepareStatement执行SQL的对象
可以防止SQL注入
区别:
- 先写SQL,用?替代参数
- 预编译SQL
- 手动给参数赋值(sql.date ,util.date不一样)
- 调用执行语句执行
放在SQL注入的本质,把传递进来的参数当做字符
假设其中传入转义字符,就直接忽略
Mybatis框架
10.6、idea连接数据库
Server returns invalid timezone. Go to Advanced tab and set serverTimezone proper
时区错误,MySQL默认的时区是UTC时区,比北京时间晚8个小时serverTimezone=UTC
10.7、事务
ACID原则
代码实现
- 开启事务
conn.setAutoCommit(false)
- 一组业务执行完毕,提交事务
- 可以在catch语句中显示的定义回滚语句,但默认失败就会回滚
10.8、数据库连接池
数据库连接–执行完毕–释放
连接–释放 十分浪费系统资源
池化技术:准备一些预先的资源,过来就连接预先准备好的
最小连接数:
最大连接数:
等待超时:
编写连接池,实现一个接口DataSource
开源数据源实现
DBCP
C3P0
Druid :阿里巴巴
使用了这些数据库连接池之后,我们在项目开发中就不需要编写连接数据库的代码了
DBCP
- 配置配置文件
- 导入jar包
- commons-dbcp-1.4
- commons-pool-1.6
C3P0
- 配置配置文件
- 导入jar包
- c3p0-0.9.5.5
- mchange-commons-java-0.2.19
结论
无论使用什么用户源,本质还是一样的,DataSource接口不会变,方法就不会变
Druid阿里
Apache基金会