如何应对数据库中大数据的查询

 

在单位面试的时候面试官问到了如何应对数据库中大数据的问题，在面试结束之后我查了下，但是匆匆而过，而今，有时间了整理下思路，大致写出来，若是有不对的地方请高手指正。

若是数据库中有10亿条数据，若是执行一条查询命令，如何以最快的速度来完成。

在公司的技术部经理问了我这个问题后，当时我回答的是用两个方法来改善，一，使用存储过程；二，在表的列上建立索引；

当时我说的理由是存储过程在考虑安全的基础上在查询的过程中只需要进行一次select就可以，而后的操作都是只需要接受参数，而无需再次进行select查询，同时也降低了网络流量，减轻了服务器的负担；对于建立索引来说，是作用于表上的列的，这样每次查询无需是从第一条数据开始，依次进行下去，直到找到数据为止，若是我们所要找的是最后一条数据，那么就要进行了10亿次对比后确定结果，这样大大的加重了服务器的负担。对于建立索引来说，无论索引用的是二分查找或者B+,B-树都好，时间复杂度相对来说减少了很多。

当面试结束后回来查了查存储过程的优点以及如何在表上建立索引，以及建立索引的类型，方法。大致概括下，如下：

存储过程的优点

1.增强了查询代码的一致性，在程序中大大的增加了程序执行的健壮性，可以对于一个存储过程在不同的代码为止来执行。

2.一次执行，多次运行（自己理解的），就是在我们执行的时候，只需要执行一次存储过程，而后直接传参数运行就可以了，而不像传统的select查询，每次都要进行一次select操作。

3.降低网络流量，存储过程就像是一个模型一样，当我们需要的时候就可以直接得到我们所需的产品，而不需每一个模型相同的产品都进行一次雕刻。所以减少了select语句。

4.可维护性好。对于用户只需要传过去请求参数，当确定参数不同的时候，修改存储过程即可。简便操作。

5.安全性高，对于存储过程来说，可以为其指定特定的操作用户，提高了系统的安全性。

6.可以有效地避免sql注入。

但是存储过程也有自己的缺点

最大的缺点应该是，移植性比较差；但是这个并不影响我们对存储过程的青睐

下面说说索引

简单的饿说所谓的索引就类似于书本的目录，我们可以在一本书中，可以先看一下目录，然后很快的找到自己想要的内容。在数据库中建立索引后，当我们根据一定条件来查找数据的时候，数据库中先是进行的是数据库的索引，然后根据索引来查询数据库。

对于索引的方法有很多，比如，书本上所说的顺序索引，散列索引等等。这些索引是为了一个共同的目的，那就是加快查询速度。

那么使用索引的好处都是有哪些呢？

一，通过创建唯一性索引，可以保证数据库表中每一行数据的唯一性。

二，可以大大加快数据的检索速度，这也是创建索引的最主要的原因。

三，可以加速表和表之间的连接，特别是在实现数据的参考完整性方面特别有意义。

四，在使用分组和排序子句进行数据检索时，同样可以显著减少查询中分组和排序的时间。

五，通过使用索引，可以在查询的过程中，使用优化隐藏器，提高系统的性能

 

在数据库的设计阶段可以选择适当的冗余，比如冗余表，可以减轻来自数据库并发操作带来的压力；冗余列，在表中添加冗余的列，这样可以减轻查询时表的连接语句。