数据库 —— 一、SQL语法（创建表、修改表、增删改查、排序 、过滤 、通配符、计算字段、函数、分组、子查询、连接 、组合查询UNION、视图、存储过程 、游标、触发器、事务管理、字符集、权限管理）

一、SQL语法

1. 基础

• 模式定义了 数据如何存储、存储什么样的数据 以及 数据如何分解 等信息

  • 外模式（外部用户）：决定用户的数据记录；
  • 逻辑模式（数据库管理员）：决定数据库内的逻辑结构；
  • 内模式（系统程序员）：决定数据库的物理存储结构。

• 数据库和表都有模式。

• 主键的值不允许修改，也不允许复用（不能将已经删除的主键值赋给新数据行的主键）。

• SQL（Structured Query Language)，标准 SQL 由 ANSI 标准委员会管理，从而称为 ANSI SQL。各个 DBMS 都有自己的实现，如 PL/SQL、Transact-SQL 等。

• SQL 语句不区分大小写，但是数据库表名、列名和值是否区分依赖于具体的 DBMS 以及配置。

• SQL 支持以下三种注释：

  #注释
  SELECT *
  FROM mytable; -- 注释
  /* 注释1
     注释2 */
  

• 数据库创建与使用：

  CREATE DATABASE test;
  USE test;
  

2. 创建表

CREATE TABLE mytable (
  # int 类型，不为空，自增
  id INT NOT NULL AUTO_INCREMENT,
  # int 类型，不可为空，默认值为 1，不为空
  col1 INT NOT NULL DEFAULT 1,
  # 变长字符串类型，最长为 45 个字符，可以为空
  col2 VARCHAR(45) NULL,
  # 日期类型，可为空
  col3 DATE NULL,
  # 设置主键为 id
  PRIMARY KEY (`id`));

3. 修改表

-- 添加列
ALTER TABLE mytable
ADD col CHAR(20);

-- 删除列
ALTER TABLE mytable
DROP COLUMN col;

-- 删除表
DROP TABLE mytable;

4. 插入

-- 普通插入
INSERT INTO mytable(col1, col2)
VALUES(val1, val2);

-- 插入检索出来的数据
INSERT INTO mytable1(col1, col2)
SELECT col1, col2
FROM mytable2;

-- 将一个表的内容插入到一个新表
-- 只有数据被复制, 属性不会被复制（主键）
CREATE TABLE newtable AS
SELECT * FROM mytable;

5. 更新

-- update 表名 set 列名 = 新值 where 其他列 = 限定值

UPDATE mytable
SET col = val
WHERE id = 1;

6. 删除

DELETE FROM mytable
WHERE id = 1;

-- TRUNCATE TABLE 可以清空表，也就是删除所有行
TRUNCATE TABLE mytable;

• 使用更新和删除操作时一定要用 WHERE 子句，不然会把整张表的数据都破坏。可以先用 SELECT 语句进行测试，防止错误删除。

7. 查询

-- DISTINCT 相同值只会出现一次,它作用于所有列，也就是说所有列的值都相同才算相同。
SELECT DISTINCT col1, col2
FROM mytable;

-- LIMIT 限制返回的行数。可以有两个参数，第一个参数为起始行，从 0 开始；第二个参数为返回的总行数。

--返回前 5 行：
SELECT *
FROM mytable
LIMIT 5;

--返回第 3 ~ 5 行：
SELECT *
FROM mytable
LIMIT 2, 3;

8. 排序

-- ASC ：升序（默认）
-- DESC ：降序
-- 可以按多个列进行排序，并且为每个列指定不同的排序方式：

SELECT *
FROM mytable
ORDER BY col1 DESC, col2 ASC;

9. 过滤

-- 不进行过滤的数据非常大，导致通过网络传输了多余的数据，从而浪费了网络带宽。因此尽量使用 SQL 语句来过滤不必要的数据，而不是传输所有的数据到客户端中然后由客户端进行过滤。

SELECT *
FROM mytable
WHERE col IS NULL;

• 下表显示了 WHERE 子句可用的操作符
  

• 应该注意到，NULL 与 0、空字符串都不同。

• AND 和 OR 用于连接多个过滤条件。优先处理 AND，当一个过滤表达式涉及到多个 AND 和 OR 时，可以使用 () 来决定优先级，使得优先级关系更清晰。

• IN 操作符用于匹配一组值，其后也可以接一个 SELECT 子句，从而匹配子查询得到的一组值。

• NOT 操作符用于否定一个条件。

10. 通配符

• 通配符也是用在过滤语句中，但它只能用于文本字段。

  • % 匹配 >=0 个任意字符；
  • _ 匹配 ==1 个任意字符；
  • [] 可以匹配集合内的字符，例如 [ab] 将匹配字符 a 或者 b。
  • 用脱字符 ^ 可以对其进行否定，也就是不匹配集合内的字符。

• 使用 Like 来进行通配符匹配。

SELECT *
FROM mytable
WHERE col LIKE '[^AB]%'; -- 不以 A 和 B 开头的任意文本

• 不要滥用通配符，通配符位于开头处匹配会非常慢。
• 通配位于开头会使索引失效

11. 计算字段

• 在数据库服务器上完成数据的转换和格式化的工作往往比客户端上快得多，并且转换和格式化后的数据量更少的话可以减少网络通信量。

-- 计算字段通常需要使用 AS 来取别名，否则输出的时候字段名为计算表达式。
SELECT col1 * col2 AS alias
FROM mytable;

-- CONCAT() 用于连接两个字段。
-- 许多数据库会使用空格把一个值填充为列宽，因此连接的结果会出现一些不必要的空格，使用 TRIM() 可以去除首尾空格。
SELECT CONCAT(TRIM(col1), '(', TRIM(col2), ')') AS concat_col
FROM mytable;

12. 函数

各个 DBMS 的函数都是不相同的，因此不可移植，以下主要是 MySQL 的函数。

1. 聚合函数

-- AVG() 会忽略 NULL 行。
-- 使用 DISTINCT 可以汇总不同的值。
SELECT AVG(DISTINCT col1) AS avg_col
FROM mytable;

2. 文本处理函数
   

-- 其中， SOUNDEX() 可以将一个字符串转换为描述其语音表示的字母数字模式。
SELECT *
FROM mytable
WHERE SOUNDEX(col1) = SOUNDEX('apple')

3. 日期和时间处理函数

-- 日期格式：YYYY-MM-DD
-- 时间格式：HH:<zero-width space>MM:SS
mysql> SELECT NOW();
2018-4-14 20:25:11

4. 数值处理函数

13. 分组

• 把具有相同的数据值的行放在同一组中。

-- 指定的分组字段除了能按该字段进行分组，也会自动按该字段进行排序。
SELECT col, COUNT(*) AS num
FROM mytable
GROUP BY col;

-- GROUP BY 自动按分组字段进行排序，ORDER BY 也可以按汇总字段来进行排序。
SELECT col, COUNT(*) AS num
FROM mytable
GROUP BY col
ORDER BY num;

-- WHERE 过滤行，HAVING 过滤分组，行过滤应当先于分组过滤。
SELECT col, COUNT(*) AS num
FROM mytable
WHERE col > 2
GROUP BY col
HAVING num >= 2;

分组规定：

• GROUP BY 子句出现在 WHERE 子句之后，ORDER BY 子句之前；
• 除了汇总字段外，SELECT 语句中的每一字段都必须在 GROUP BY 子句中给出；
• NULL 的行会单独分为一组；
• 大多数 SQL 实现不支持 GROUP BY 列具有可变长度的数据类型。

14. 子查询

• 子查询中只能返回一个字段的数据。

-- 可以将子查询的结果作为 WHRER 语句的过滤条件：
SELECT *
FROM mytable1
WHERE col1 IN (SELECT col2
               FROM mytable2);

-- 下面的语句可以检索出客户的订单数量，子查询语句会对第一个查询检索出的每个客户执行一次：
SELECT cust_name, (SELECT COUNT(*)
                   FROM Orders
                   WHERE Orders.cust_id = Customers.cust_id)
                   AS orders_num
FROM Customers
ORDER BY cust_name;

15. 连接

• 连接用于连接多个表，使用 JOIN 关键字，并且条件语句使用 ON 而不是 WHERE。

• 连接可以替换子查询，并且比子查询的效率一般会更快。

• 可以用 AS 给列名、计算字段和表名取别名，给表名取别名是为了简化 SQL 语句以及连接相同表。

1. 内连接
   • 内连接又称等值连接，使用 INNER JOIN 关键字。

SELECT A.value, B.value
FROM tablea AS A INNER JOIN tableb AS B
ON A.key = B.key;

-- 可以不明确使用 INNER JOIN，而使用普通查询并在 WHERE 中将两个表中要连接的列用等值方法连接起来。
SELECT A.value, B.value
FROM tablea AS A, tableb AS B
WHERE A.key = B.key;

2. 自连接
   • 自连接可以看成内连接的一种，只是连接的表是自身而已。
   • 一张员工表，包含员工姓名和员工所属部门，要找出与 Jim 处在同一部门的所有员工姓名。

-- 子查询版本
SELECT name
FROM employee
WHERE department = (
      SELECT department
      FROM employee
      WHERE name = "Jim");

-- 自连接版本
SELECT e1.name
FROM employee AS e1 INNER JOIN employee AS e2
ON e1.department = e2.department
      AND e2.name = "Jim";

3. 自然连接
   • 自然连接是把同名列通过等值测试连接起来的，同名列可以有多个。

• 内连接和自然连接的区别：内连接提供连接的列，而自然连接自动连接所有同名列。

SELECT A.value, B.value
FROM tablea AS A NATURAL JOIN tableb AS B;

4. 外连接
   • 外连接保留了没有关联的那些行。
   • 分为左外连接，右外连接以及全外连接，左外连接就是保留左表没有关联的行。

检索所有顾客的订单信息，包括还没有订单信息的顾客。

SELECT Customers.cust_id, Customer.cust_name, Orders.order_id
FROM Customers LEFT OUTER JOIN Orders
ON Customers.cust_id = Orders.cust_id;

16. 组合查询UNION

• 使用 UNION 来组合两个查询，如果第一个查询返回 M 行，第二个查询返回 N 行，那么组合查询的结果一般为 M+N 行。
• 每个查询必须包含相同的列、表达式和聚集函数。
• 默认会去除相同行，如果需要保留相同行，使用 UNION ALL。
• 只能包含一个 ORDER BY 子句，并且必须位于语句的最后。

SELECT col
FROM mytable
WHERE col = 1
UNION
SELECT col
FROM mytable
WHERE col =2;

17. 视图

• 视图是虚拟的表，本身不包含数据，也就不能对其进行索引操作。、
• 对视图的操作和对普通表的操作一样。
• 视图具有如下好处：
  • 简化复杂的 SQL 操作，比如复杂的连接；
  • 只使用实际表的一部分数据；
  • 通过只给用户访问视图的权限，保证数据的安全性；
  • 更改数据格式和表示。

CREATE VIEW myview AS
SELECT Concat(col1, col2) AS concat_col, col3*col4 AS compute_col
FROM mytable
WHERE col5 = val;

18. 存储过程

• 存储过程可以看成是对一系列 SQL 操作的批处理。

• 使用存储过程的好处：

  • 代码封装，保证了一定的安全性；
  • 代码复用；
  • 由于是预先编译，因此具有很高的性能。

• 命令行中创建存储过程需要自定义分隔符，因为命令行是以 ; 为结束符，而存储过程中也包含了分号，因此会错误把这部分分号当成是结束符，造成语法错误。

• 包含 in、out 和 inout 三种参数。

• 给变量赋值都需要用 select into 语句。

• 每次只能给一个变量赋值，不支持集合的操作。

delimiter //

create procedure myprocedure( out ret int )
    begin
        declare y int;
        select sum(col1)
        from mytable
        into y;
        select y*y into ret;
    end //

delimiter ;

考点题目

1. 什么是存储过程？

   • 存储过程就是作为 可执行对象 存放在数据库中的 一个或多个SQL命令。
   • 通俗来讲：存储过程其实就是能完成一定操作的一组SQL语句。

2. 为什么要建立存储过程？

   • 由于数据库执行动作时，是先编译后执行的。然而存储过程是一个编译过的代码块，所以执行效率要比T-SQL语句高。
   • 一个存储过程在程序在网络中交互时可以替代大堆的T-SQL语句，所以也能降低网络的通信量，提高通信速率。
   • 通过存储过程能够使没有权限的用户在控制之下间接地存取数据库，从而确保数据的安全。

3. 存储过程分别有哪些类型？

   • Oracle存储过程包含三部分：过程声明，执行过程部分，存储过程异常（可写可不写，要增强脚本的容错性和调试的方便性那就写上异常处理）

4. 关于存储过程，以下说法正确的是？

   • (1)存储过程可以看成是对一系列 SQL 操作的批处理
   • (2)把实现封装在了存储过程中，无法保证安全性
   • (3)存储过程不是预先编译
   • (4)命令行中创建存储过程需要自定义分隔符，因为命令行是以 ; 为结束符，而存储过程中也包含了分号，因此会错误把这部分分号当成是结束符，造成语法错误。
   • (5)包含out in和 outin 三种参数
   • (6)每次只能给一个变量赋值，不支持集合的操作。

正确答案：2 把实现封装在了存储过程中，不仅简单，也保证了安全性；3是预先编译；5包含 in、out 和 inout 三种参数

19. 游标

• 在存储过程中使用游标可以对一个结果集进行移动遍历。
• 游标主要用于交互式应用，其中用户需要对数据集中的任意行进行浏览和修改。
• 使用游标的四个步骤：
  1. 声明游标，这个过程没有实际检索出数据；
  2. 打开游标；
  3. 取出数据；
  4. 关闭游标；

delimiter //
create procedure myprocedure(out ret int)
    begin
        declare done boolean default 0;
    	declare mycursor cursor for
   		select col1 from mytable;
    	# 定义了一个 continue handler，当 sqlstate '02000' 这个条件出现时，会执行 set done = 1
    	declare continue handler for sqlstate '02000' set done = 1;

    	open mycursor;

    	repeat
        	fetch mycursor into ret;
        	select ret;
   		until done end repeat;

    	close mycursor;
	end //
delimiter ;

20. 触发器

• 触发器（trigger）是SQL server 提供给程序员和数据分析员来保证数据完整性的一种方法，它是与表事件相关的特殊的存储过程，它的执行不是由程序调用，也不是手工启动，而是由事件来触发，比如当对一个表进行操作（ insert，delete， update）时就会激活它执行。

• 触发器经常用于加强数据的完整性约束和业务规则等。

• 触发器会在某个表执行以下语句时而自动执行：DELETE、INSERT、UPDATE。

• 触发器必须指定在语句执行之前还是之后自动执行

  • 之前执行使用 BEFORE 关键字
  • 之后执行使用 AFTER 关键字。
  • BEFORE 用于数据验证和净化，AFTER 用于审计跟踪，将修改记录到另外一张表中。

CREATE TRIGGER mytrigger AFTER INSERT ON mytable
FOR EACH ROW SELECT NEW.col into @result;
SELECT @result; -- 获取结果

• INSERT 触发器包含一个名为 NEW 的虚拟表。

• DELETE 触发器包含一个名为 OLD 的虚拟表，并且是只读的。

• UPDATE 触发器包含一个名为 NEW 和一个名为 OLD 的虚拟表，其中 NEW 是可以被修改的，而 OLD 是只读的。

• MySQL 不允许在触发器中使用 CALL 语句，也就是不能调用存储过程。

21. 事务管理

• 事务管理是对于一系列数据库操作进行管理，一个事务包含一个或多个SQL语句，是逻辑管理的工作单元（原子单元）。
• 基本术语：
  • 事务（transaction）指一组 SQL 语句；
  • 回退（rollback）指撤销指定 SQL 语句的过程；
  • 提交（commit）指将未存储的 SQL 语句结果写入数据库表；
  • 保留点（savepoint）指事务处理中设置的临时占位符（placeholder），你可以对它发布回退（与回退整个事务处理不同）。
• 不能回退 SELECT 语句，回退 SELECT 语句也没意义；也不能回退 CREATE 和 DROP 语句。
• MySQL 的事务提交默认是隐式提交，每执行一条语句就把这条语句当成一个事务然后进行提交。当出现 START TRANSACTION 语句时，会关闭隐式提交；当 COMMIT 或 ROLLBACK 语句执行后，事务会自动关闭，重新恢复隐式提交。
• 设置 autocommit 为 0 可以取消自动提交；autocommit 标记是针对每个连接而不是针对服务器的。
• 如果没有设置保留点，ROLLBACK 会回退到 START TRANSACTION 语句处；如果设置了保留点，并且在 ROLLBACK 中指定该保留点，则会回退到该保留点。

START TRANSACTION
// ...
SAVEPOINT delete1
// ...
ROLLBACK TO delete1
// ...
COMMIT

22. 字符集

• 基本术语：
  • 字符集为字母和符号的集合；
  • 编码为某个字符集成员的内部表示；
  • 校对字符指定如何比较，主要用于排序和分组。

-- 除了给表指定字符集和校对外，也可以给列指定：
CREATE TABLE mytable
(col VARCHAR(10) CHARACTER SET latin COLLATE latin1_general_ci )
DEFAULT CHARACTER SET hebrew COLLATE hebrew_general_ci;

-- 可以在排序、分组时指定校对：
SELECT *
FROM mytable
ORDER BY col COLLATE latin1_general_ci;

23. 权限管理

-- MySQL 的账户信息保存在 mysql 这个数据库中。
USE mysql;
SELECT user FROM user;

-- 创建账户 
-- 新创建的账户没有任何权限。
CREATE USER myuser IDENTIFIED BY 'mypassword';

-- 修改账户名
RENAME USER myuser TO newuser;

-- 删除账户
DROP USER myuser;

-- 查看权限
SHOW GRANTS FOR myuser;

-- 授予权限
-- 账户用 username@host 的形式定义，username@% 使用的是默认主机名。
GRANT SELECT, INSERT ON mydatabase.* TO myuser;

-- 删除权限
/*
GRANT 和 REVOKE 可在几个层次上控制访问权限：
	整个服务器，使用 GRANT ALL 和 REVOKE ALL；
	整个数据库，使用 ON database.*；
	特定的表，使用 ON database.table；
	特定的列；
	特定的存储过程。
*/

REVOKE SELECT, INSERT ON mydatabase.* FROM myuser;

-- 更改密码
-- 必须使用 Password() 函数进行加密。
SET PASSWROD FOR myuser = Password('new_password');