MySQL索引、事务、存储引擎-CSDN博客

索引是一个排序的列表，在这个列表中存储着索引的值和包含这个值的数据所在行的物理地址（类似于C语言的链表通过指针指向数据记录的内存地址）。
使用索引后可以不用扫描全表来定位某行的数据，而是先通过索引表找到该行数据对应的物理地址然后访问相应的数据，因此能加快数据库的查询速度。
索引就好比是一本书的目录，可以根据目录中的页码快速找到所需的内容。
索引是表中一列或者若干列值排序的方法。
建立索引的目的是加快对表中记录的查找或排序。

1.2.索引的作用

设置了合适的索引之后，数据库利用各种快速定位技术，能够大大加快查询速度，这是创建索引的最主要的原因。
当表很大或查询涉及到多个表时，使用索引可以成千上万倍地提高查询速度。
可以降低数据库的I/O成本，并且索引还可以降低数据库的排序成本。
通过创建唯一性索引，可以保证数据表中每一行数据的唯一性。
可以加快表与表之间的连接。
在使用分组和排序时，可大大减少分组和排序的时间。

1.3.索引的副作用

索引需要占用额外的磁盘空间。
对于MyISAM引擎而言，索引文件和数据文件是分离的，索引文件用于保存数据记录的地址。
而InnoDB引擎的表数据文件本身就是索引文件
更新一个包含索引的表，需要比更新一个没有索引的表花费更多的时间，这是由于索引本身也需要更新。因此，理想的做法是仅仅在常常被搜素的列(以及表)上面创建索引

1.4.创建索引的原则依据

索引虽可以提升数据库查询的速度，但并不是任何情况下都适合创建索引。因为索引本身会消耗系统资源，在有索引的情况下，数据库会先进行索引查询，然后定位到具体的数据行，如果索引使用不当，反而会增加数据库的负担。

（1）表的主键、外键必须有索引。因为主键具有唯一性，外键关联的是主表的主键，查询时可以快速定位。
（2）记录数超过300行的表应该有索引。如果没有索引，每次查询都需要把表遍历一遍，会严重影响数据库的性能。
（3）经常与其他表进行连接的表，在连接字段上应该建立索引。
（4）唯一性太差的字段不适合建立索引。
（5）更新太频繁地字段不适合创建索引。
（6）经常出现在where子句中的字段，特别是大表的字段，应该建立索引。
（7）索引应该建在选择性高（冗余度低）的字段上。
（8）索引应该建在小字段上，对于大的文本字段甚至超长字段，不要建索引。

ps：MySQL的优化哪些字段/场景适合创建索引，哪些不适合?

①小字段 ②唯一性强的字段 ③更新不频繁,但查询率很高的字段 ④表记录超过300+行 ⑤主、外键、唯一键.

1.5.索引的分类和创建

创建模板

mysql -u root -p369369
create database zz;
use zz;
create table ll (id int(10),name varchar(10),cardid varchar(18),phone varchar(11), address varchar(50),remark text);

desc ll;
insert into ll values (1,'zitai','123','222222', 'shanghai','this is vip');
insert into ll values (2,'uzi','1234','555555','nanjing','this is normal');
select * from ll;

1）普通索引

最基本的索引类型,没有唯一性之类的限制.

①直接创建索引

create index 索引名 on 表名(列名[ ( length) ]);

(列名(length) ): length是可选项。如果忽略length的值，则使用整个列的值作为索引。如果指定使用列前的length个字符来创建索引，这样有利于减小索引文件的大小。在不损失精确性的情况下，长度越短越好。
索引名建议以"index”结尾。

例：

create index name_index on ll(name(4));
show create table ll;

②修改表方式创建

alter table 表名 add index 索引名 (列名);

例：
alter table ll add index index_cardid (cardid);

③创建表的时候指定索引

create table 表名 ( 字段1 数据类型,字段2 数据类型,[...],index 索引名 (列名));

例：
create table liwen (id int,name char(4),index index_id(id));

2）唯一索引

与普通索引类似，但区别是唯一索引列的每个值都唯一。唯一索引允许有空值（注意和主键不同）。如果是用组合索引创建，则列值的组合必须唯一。添加唯一键将自动创建唯一索引。

①直接创建唯一索引

create unique index 索引名 on 表名(列名);

例：

create unique index phone_index on clr(phone);

②修改表方式创建

alter table 表名 add unique 索引名 (列名);

例：

alter table clr add unique remark_index (phone);

③创建表的时候指定

create table 表名 (字段1 数据类型,字段2 数据类型,[...],unique 索引名 (列名));

例：

create table xiaoxiao (id int(4),name char(4),unique id_index(id))

3）主键索引

是一种特殊的唯一索引，必须指定为==‘‘PRIMARY KEY’’==。一个表只能有一个主键，不允许有空值。添加主键将自动创建主键索引。
①创建表的时候指定

create table 表名 ([...],primary key (列名));

例：
create table llw (id int,name char(4),primary key(id));

②修改表方式创建

alter table 表名 add primary key (列名); 

例：
alter table llws add primary key (id);

4）组合索引

（单列索引与多列索引）：可以是单列上创建的索引，也可以是在多列上创建的索引。需要满足最左原则，因为select语句的where条件是依次从左往右执行的，所以在使用select语句查询时，where条件使用的字段顺序必须和组合索引中的排序一致，否则索引将不会生效。

组合索引创建的字段顺序是其触发索引的查询顺序。

create table 表名 (列名1 数据类型,列名2 数据类型,列名3 数据类型,index 索引名 (列名1,列名2,列名3));

例：
alter table ll add index index_id_name(id,name);
select id,name from ll;    #按照创建的字段，则会触发组合索引
select name,id from ll;  #按照索引从左到右检索的顺序，则不会触发组合索引

5）全文索引

（fulltext）：适合在进行模糊查询的时候使用，可用于在一篇文章中检索文本信息。在 MySQL5.6版本以前FULLTEXT索引仅可用于MyISAM引擎，在5.6版本之后innodb引擎也支持fulltext索引。全文索引可以在char、vaechar或者text类型的列上创建。
①直接创建索引

create fulltext index 索引名 on 表名 (列名);

例：
create fulltext index name_index on ll (name);

②修改表方式创建

alter table 表名 add fulltext 索引名 (列名);

例：
alter table ll add fulltext cardid_index(cardid);

③创建表的时候指定索引

create table 表名 (字段1 数据类型,[...],fulltext 索引名 (列名));
#数据类型可以为char、varchar或者text

例：
create table zhangrui (id int,name varchar(4),fulltext name_index(name));

④使用全文索引查询

select * from 表名 where match(列名) against('查询内容');

例：
select * from ll where match(name) against('wutiaowu')

1.6.查看索引

show create table 表名;
show index from 表名;
show index from 表名\G;   #纵向显示索引信息
show keys from 表名;
show keys from 表名\G;

 
各字段的含义如下：
Table：表的名称。
Non_unique：如果索引不能包括重复词，则为 0；如果可以，则为 1。
Key_name：索引的名称。
Seq_in_index：索引中的列序号，从 1 开始。
Column_name：列名称。
Collation：列以什么方式存储在索引中。在 MySQL 中，有值‘A’（升序）或 NULL（无分类）。
Cardinality：索引中唯一值数目的估计值。
Sub_part：如果列只是被部分地编入索引，则为被编入索引的字符的数目。如果整列被编入索引，则为 NULL。
Packed：指示关键字如何被压缩。如果没有被压缩，则为 NULL。
Null：如果列含有 NULL，则含有 YES。如果没有，则该列含有 NO。
Index_type：用过的索引方法（BTREE, FULLTEXT, HASH, RTREE）。
Comment：备注。

1.7.删除索引

1）直接删除索引

drop index 索引名 on 表名;

例：
drop index name_index on ll;

2）修改表方式删除索引

alter table 表名 drop index 索引名;

例：
alter table ll drop index cardid_index;

3）删除主键索引

alter table 表名 drop primary key;

例：
alter table ll drop primary key;

1.8.索引优化查询速度

explain select ... 可以用于分析select查询语句，看key字段，确定是否使用了索引或索引使用是否正确

二.事务

2.1.事务的概念

事务是一种机制、一个操作序列，包含了一组数据库操作命令，并且把所有的命令作为一个整体，一起向系统提交或撤销操作请求，即这一组数据库命令要么都执行，要么都不执行。
事务是一个不可分割的工作逻辑单元。在数据库系统上执行并发操作时，事务是最小的控制单元。
事务适用于多用户同时操作的数据库系统的场景，如银行、保险公司及证券交易系统等等。
事务通过事务的整体性以保证数据的一致性。
事务能够提高在向表中更新和插入信息期间的可靠性。

说白了，所谓事务，它是一个操作序列，这些操作要么都执行，要么都不执行，它是一个不可分割的工作单位。

2.2.事务的ACID特点

ACID，是指在可靠数据库管理系统（DBMS）中，事务(transaction)应该具有的四个特性：原子性（Atomicity）、一致性（Consistency）、隔离性（Isolation）、持久性（Durability）。这是可靠数据库所应具备的几个特性。

原子性

指事务是一个不可再分割的工作单位，事务中的操作要么都发生，要么都不发生。

事务是一个完整的操作，事务的各元素是不可分的。
事务中的所有元素必须作为一个整体提交或回滚。
如果事务中的任何元素失败，则整个事务将失败。

案例：
A给B转帐100元钱的时候只执行了扣款语句，就提交了，此时如果突然断电，A账号已经发生了扣款，B账号却没收到加款，在生活中就会引起纠纷。这种情况就需要事务的原子性来保证事务要么都执行，要么就都不执行。

一致性

指在事务开始之前和事务结束以后，数据库的完整性约束没有被破坏。

当事务完成时，数据必须处于一致状态。
在事务开始前，数据库中存储的数据处于一致状态。
在正在进行的事务中，数据可能处于不一致的状态。
当事务成功完成时，数据必须再次回到已知的一致状态。

案例：
对银行转帐事务，不管事务成功还是失败，应该保证事务结束后表中A和B的存款总额跟事务执行前一致。

隔离性

指在并发环境中，当不同的事务同时操纵相同的数据时，每个事务都有各自的完整数据空间。

对数据进行修改的所有并发事务是彼此隔离的，表明事务必须是独立的，它不应以任何方式依赖于或影响其他事务。
修改数据的事务可在另一个使用相同数据的事务开始之前访问这些数据，或者在另一个使用相同数据的事务结束之后访问这些数据。
也就是说并发访问数据库时，一个用户的事务不被其他事务所干扰，各并发事务之间数据库是独立的。

当多个客户端并发地访问同一个表时，可能出现下面的一致性问题：
（1）脏读：当一个事务正在访问数据，并且对数据进行了修改，而这种修改还没有提交到数据库中，这时，另外一个事务也访问这个数据，然后使用了这个数据。
（2）不可重复读：指在一个事务内，多次读同一数据。在这个事务还没有结束时，另外一个事务也访问该同一数据。那么，在第一个事务中的两次读数据之间，由于第二个事务的修改，那么第一个事务两次读到的的数据可能是不一样的。这样就发生了在一个事务内两次读到的数据是不一样的，因此称为是不可重复读。（即不能读到相同的数据内容）
（3）幻读：一个事务对一个表中的数据进行了修改，这种修改涉及到表中的全部数据行。同时，另一个事务也修改这个表中的数据，这种修改是向表中插入一行新数据。那么，操作前一个事务的用户会发现表中还有一个没有修改的数据行，就好象发生了幻觉一样。
（4）丢失更新：两个事务同时读取同一条记录，A先修改记录，B也修改记录（B不知道A修改过），B提交数据后B的修改结果覆盖了A的修改结果。

mysql默认的事务处理级别是 repeatable read ，而Oracle和SQL Server是 read committed 。

事务的隔离级别决定了事务之间可见的级别。

MySQL事务支持如下四种隔离，用以控制事务所做的修改，并将修改通告至其它并发的事务：

隔离名称	功能作用
未提交读(Read Uncommitted（RU）)	允许脏读，即允许一个事务可以看到其他事务未提交的修改
提交读(Read Committed（RC）)	允许一个事务只能看到其他事务已经提交的修改，未提交的修改是不可见的。防止脏读
可重复读(Repeatable Read（RR）)	—mysql默认的隔离级别确保如果在一个事务中执行两次相同的SELECT语句，都能得到相同的结果，不管其他事务是否提交这些修改。可以防止脏读和不可重复读
串行读(Serializable)	—相当于锁表完全串行化的读，将一个事务与其他事务完全地隔离。每次读都需要获得表级共享锁，读写相互都会阻塞。可以防止脏读，不可重复读取和幻读，(事务串行化)会降低数据库的效率

//事务隔离级别的作用范围分为两种：
● 全局级：对所有的会话有效
● 会话级：只对当前的会话有效
 
查询全局事务隔离级别：
show global variables like '%isolation%';
SELECT @@global.tx_isolation;
 
查询会话事务隔离级别：
show session variables like '%isolation%';
SELECT @@session.tx_isolation; 
SELECT @@tx_isolation;
 
设置全局事务隔离级别：
set global transaction isolation level read committed;
set @@global.tx_isolation='read-committed';   #重启服务后失效
 
设置会话事务隔离级别：
set session transaction isolation level repeatable read;
set @@session.tx_isolation='repeatable-read';

注意： mysql默认的事务处理级别是可重复读repeatable read ，而Oracle和SQL Server是提交读read committed 。

持久性

在事务完成以后，该事务所对数据库所作的更改便持久的保存在数据库之中，并不会被回滚。
指不管系统是否发生故障，事务处理的结果都是永久的。
一旦事务被提交，事务的效果会被永久地保留在数据库中。

总结：在事务管理中，原子性是基础，隔离性是手段，一致性是目的，持久性是结果。

事务控制语句

BEGIN 或 START TRANSACTION：显式地开启一个事务。
COMMIT 或 COMMIT WORK：提交事务，并使已对数据库进行的所有修改变为永久性的。
ROLLBACK 或 ROLLBACK WORK：回滚会结束用户的事务，并撤销正在进行的所有未提交的修改。
SAVEPOINT S1：使用 SAVEPOINT 允许在事务中创建一个回滚点，一个事务中可以有多个 SAVEPOINT；“S1”代表回滚点名称。
ROLLBACK TO [SAVEPOINT] S1：把事务回滚到标记点。

#查看当前的隔离级别
show session variables like '%isolation%';
 
修改隔离级别
set session transaction isolation level read committed;

使用 set 设置控制事务

SET AUTOCOMMIT=0;						#禁止自动提交
SET AUTOCOMMIT=1;						#开启自动提交，Mysql默认为1
SHOW VARIABLES LIKE 'AUTOCOMMIT';		#查看Mysql中的AUTOCOMMIT值
 
如果没有开启自动提交，当前会话连接的mysql的所有操作都会当成一个事务直到你输入rollback|commit;当前事务才算结束。当前事务结束前新的mysql连接时无法读取到任何当前会话的操作结果。
如果开起了自动提交，mysql会把每个sql语句当成一个事务，然后自动的commit。
当然无论开启与否，begin; commit|rollback; 都是独立的事务。

#查看事务的自动提交功能是否开启
show variables like 'autocommit';

三.存储引擎

3.1.概念介绍

MySQL中的数据用各种不同的技术存储在文件中，每一种技术都使用不同的存储机制、索引技巧、锁定水平，并最终提供不同的功能和能力，这些不同的技术以及配套的功能在MySQL中称为存储引擎，存储引擎是MySQL将数据存储在文件系统中的存储方式或者存储格式

3.2.MyISAM 表支持 3 种不同的存储格式

（1）静态(固定长度)表
静态表是默认的存储格式。静态表中的字段都是非可变字段，这样每个记录都是固定长度的，这种存储方式的优点是存储非常迅速，容易缓存，出现故障容易恢复；缺点是占用的空间通常比动态表多。
 
（2）动态表
动态表包含可变字段，记录不是固定长度的，这样存储的优点是占用空间较少，但是频繁的更新、删除记录会产生碎片，需要定期执行 OPTIMIZE TABLE 语句或 myisamchk -r 命令来改善性能，并且出现故障的时候恢复相对比较困难。
 
（3）压缩表
压缩表由 myisamchk 工具创建，占据非常小的空间，因为每条记录都是被单独压缩的，所以只有非常小的访问开支。

3.3.常用存储引擎

InnoDB：支持事务、外键约束，支持行级锁定（在全表扫描时仍然表级锁定），
读写并发能力较好，在5.5版本才支持全文索引，缓存能力较好可以减少磁盘IO的压力，数据和索引是存储在一个文件中。
使用场景：适用于一致性要求较高，数据频繁更新，高并发读写的业务场景。
 
MyISAM：不支持事务、外键约束，只支持表级锁定，
适合单独的查询或写入，读写并发能力较差，支持全文索引，占用资源较小适合硬件资源相对比较差的服务器使用，数据和索引是分开存储的。
使用场景：适用于不需要事务处理，单独的查询或插入数据的业务场景。

3.4.MyISAM

①特点介绍

MylSAM不支持事务，也不支持外键约束，只支持全文索引，数据文件和索引文件是分开保存的
访问速度快，对事务完整性没有要求
MylSAM适合查询、插入为主的应用
MyISAM在磁盘上存储成三个文件，文件名和表名都相同，但是扩展名分别为:

.frm文件存储表结构

数据文件的扩展名为.MYD（MYData）

索引文件的扩展名是.MYD（MYlndex）

表级锁定形式，数据在更新时锁定整个表

数据库在读写过程中相互阻塞

会在数据写入的过程阻塞用户数据的读取
也会在数据读取的过程中阻塞用户的数据写入

数据单独写入或读取，速度过程较快且占用资源相对少

MyIAM支持的存储格式

静态表
动态表
压缩表

②支持的存储格式

MyISAM表支持3 种不同的存储格式：

（1）静态(固定长度)表

静态表是默认的存储格式。静态表中的字段都是非可变字段，这样每个记录都是固定长度的，这种存储方式的优点是存储非常迅速，容易缓存，出现故障容易恢复；缺点是占用的空间通常比动态表多。

（2）动态表

动态表包含可变字段，记录不是固定长度的，这样存储的优点是占用空间较少，但是频繁的更新、删除记录会产生碎片，需要定期执行optimize table语句或 myisamchk -r 命令来改善性能，并且出现故障的时候恢复相对比较困难。

（3）压缩表

压缩表由myisamchk工具创建，占据非常小的空间，因为每条记录都是被单独压缩的，所以只有非常小的访问开支。

③适用的生产场景

公司业务不需要事务的支持
单方面读取或写入数据比较多的业务
MyISAM存储引擎数据读写都比较频繁场景不适合
使用读写并发访问相对较低的业务
数据修改相对较少的业务
对数据业务一致性要求不是非常高的业务
服务器硬件资源相对比较差

3.5.InnoDB

①特点介绍

支持事务，支持4个事务隔离级别
MySQL从5.5.5版本开始，默认的存储引擎为InnoDB
读写阻塞与事务隔离级别相关
能非常高效的缓存索引和数据
表与主键以簇的方式存储
支持分区、表空间，类似oracle数据库
支持外键约束，5.5前不支持全文索引，5.5后支持全文索引
对硬件资源要求还是比较高的场合
行级锁定，但是全表扫描仍然会是表级锁定，如

update table set a=1 where user like "%zhang%";

InnoDB中不保存表的行数，如select count(*) from table;InnoDB需要扫描一遍整个表来计算有多少行，但是MyISAM只要简单的读出保存好的行数即可。需要注意的是，当count(*)语句包含where条件 MyISAM也需要扫描整个表.
对于自增长的字段,InnoDB中必须包含只有该字段的索引，但是在MyISAM表中可以和其他字段一起建立组合索引.
清空整个表时，InnoDB是一行一行的删除，效率非常慢。MylSAM则会重建表

②适用生产场景分析

业务需要事务的支持

行级锁定对高并发有很好的适应能力，但需要确保查询是通过索引来完成

业务数据更新较为频繁的场景

如：论坛、微博等

业务数据一致性要求较高

如：银行业务

硬件设备内存较大，利用InnoDB较好的缓存能力来提高内存利用率，减少磁盘io的压力

3.6.企业选择存储引擎依据

需要考虑每个存储引擎提供了哪些不同的核心功能及应用场景

支持的字段和数据类型

所有引擎都支持通用的数据类型
但不是所有的引擎都支持其他的字段类型，如二进制对象

锁定类型：不同的存储引擎支持不同级别的锁定

表锁定：MyISAM 支持
行锁定：InnoDB 支持

索引的支持

建立索引在搜索和恢复数据库中的数据时能显著提高性能
不同的存储引擎提供不同的制作索引的技术
有些存储引擎根本不支持索引

事务处理的支持

提高在向表中更新和插入信息期间的可靠性
可根据企业业务是否要支持事务选择存储引擎

3.7.MyISAM和InnoDB的区别

区别类型	MyISAM	InnoDB
构成上的区别	每个MyISAM在磁客上存储成三个文件。第一个文件的名字以表的名字开始，扩展名指出文件类型。.frm文件存情表定义。数据文件的扩展名为MYD(MYData)。素引文件的扩展名是MY(MYIndex)。	基于磁盘的资源是InnoDB表空问数据文件和它的日志文件，InnoDB表的大小只受限于操作系统文件的大小，一般为 2GB
事务处理上方面	MyISAM类型的表强调的是性能，其执行数度比InnoDB类型更快，但是不提供事务支持	InnoDB提供事务支持事务，外部睫 (foreign key)等高级数据库功能
select、update、insert、delete操作	如果执行大量的select，MyISAM是更好的选择	1.如果你的数据执行大盘的INSERT或UPDATE，出于性能方面的考虑，应该使用InnoDB表 2.delete from table时，InnoDB不会重新建立表，而是一行一行的删除。 3.load table from master操作对InnoDe是不起作用的，解决方法是首先把InnoDB表改成MyISAM表，导入数据后再改成InnoDB表，但是对于使用的额外的InnoDB特性（例如外键）的表不适用
对 auto_increment的操作	每表一个auto_increment列的内部处理 MyISAM为INSERT和update操作白动更新这-列这使得auto_increment列更快(至少10%)，在序列顶的值被删之后就不能再利用。(当AUTOINCREMENT列被定义为多列索引的最后一列，可以出现重使用从序列顶部删除的值的情况).auto_increment值可用alter table或myisamch来重置对于auto_increment类型的字段，InnoDB中必须包含只有该字段的素引，但是在MylSAM表中，可以和其他字段一起建立联合索引，更好和更快的auto_increment处理	如果你为一个表指定auto_increment列，在数据词典里的InnoDB表句柄包含一个名为自动增长计数器的计散器，它被用在为该列赋新值。自动增长计数器仅被存储在生内存中，而不是存在德盘上关于该计算器的算法实现，请参考 AUTOINCREMENT列在InnoDB里如何工作
表的县体行数	select count()from table,MyISAM只要简单的读出保存好的行数，注意的是，当count(语句包含 where条件时，两种表的操作是一样的	InnoDB 中不保存表的具体行数，也就是说，执行select count()from table时，InnoDB要扫描一遍整个表来计算有多少行
锁	表锁	提供行锁(lockingonrow level)提供与 Oracle类型一致的不加锁这取(nonocking readin select)，另外，InnoDB表的行锁也不是绝对的，如果在执行一个SQL语句时MySQL不能确定要扫描的范围，InnoDB表同样会锁全表，例如update table set num=1 where name like "%aaa%"

3.8.查看系统支持的存储引擎

show engines;

3.9.查看表使用的存储引擎

方法一：
show table status from 库名 where name='表名'\G
 
方法二：
use 库名;
show create table 表名;

show table status from zz where name='liu'\G;

use zz;
show create table liu;

3.10.修改存储引擎

方法一：
通过 alter table 修改
use 库名;
alter table 表名 engine=MyISAM;
 
eg:
alter table liu engine=MyISAM;
show create table liu;

方法二：
通过修改 /etc/my.cnf 配置文件，指定默认存储引擎并重启服务
vim /etc/my.cnf
......
[mysqld]
......
default-storage-engine=INNODB
 
systemctl restart mysql.service
注意：此方法只对修改了配置文件并重启mysql服务后新创建的表有效，已经存在的表不会有变更。

方法三：
通过 create table 创建表时指定存储引擎
use 库名;
create table 表名(字段1 数据类型,...) engine=MyISAM;
 
 
eg:
use zz;
create table ak47(name varchar(10),age char(4)) engine=MyISAM;
show create table ak47\G;

3.11.InnoDB行锁与索引的关系

1）
delete from t1 where id=1;	
如果id字段是主键，innodb对于主键使用了聚簇索引，会直接锁住整行记录。
 
2）
delete from t1 where name='xiaomei';
如果name字段是普通索引，会先锁住索引的两行，接着会锁住相应主键对应的记录。
 
3）
delete from t1 where age=20;
如果age字段没有索引，会使用全表扫描过滤，这时表上的各个记录都将加上锁。