视图、索引、存储过程优缺点

SQL存储过程的概念 优点及语法
整理在学习程序过程之前，先了解下什么是存储过程？为什么要用存储过程，他有那些优点

定义：将常用的或很复杂的工作，预先用SQL语句写好并用一个指定的名称存储起来, 那么以后要叫数据库提供与已定义好的存储过程的功能相同的服务时,只需调用execute,即可自动完成命令。

讲到这里,可能有人要问：这么说存储过程就是一堆SQL语句而已啊？Microsoft公司为什么还要添加这个技术呢? 那么存储过程与一般的SQL语句有什么区别呢?

存储过程的优点：
　　1.存储过程只在创造时进行编译，以后每次执行存储过程都不需再重新编译，而一般SQL语句每执行一次就编译一次,所以使用存储过程可提高数据库执行速度。
　　2.当对数据库进行复杂操作时(如对多个表进行Update,Insert,Query,Delete时），可将此复杂操作用存储过程封装起来与数据库提供的事务处理结合一起使用。
　　3.存储过程可以重复使用,可减少数据库开发人员的工作量
　　4.安全性高,可设定只有某此用户才具有对指定存储过程的使用权

存储过程的种类：

    1.系统存储过程：以sp_开头,用来进行系统的各项设定.取得信息.相关管理工作,
　　如 sp_help就是取得指定对象的相关信息  

    2.扩展存储过程   以XP_开头,用来调用操作系统提供的功能
    exec master..xp_cmdshell 'ping 10.8.16.1'

    3.用户自定义的存储过程,这是我们所指的存储过程

常用格式

   Create procedure procedue_name
   [@parameter data_type][output]
   [with]{recompile|encryption}
   as
        sql_statement

解释:
output：表示此参数是可传回的
with {recompile|encryption}
recompile:表示每次执行此存储过程时都重新编译一次
encryption:所创建的存储过程的内容会被加密

SQL存储过程学习：存储过程的创建

表book的内容如下

   编号    书名                           价格
   001     C语言入门                      $30
   002     PowerBuilder报表开发           $52

实例1:查询表Book的内容的存储过程

   create proc query_book
      as
      select * from book
   go
   exec query_book
 
实例2:加入一笔记录到表book,并查询此表中所有书籍的总金额
   Create proc insert_book
   @param1 char(10),@param2 varchar(20),@param3 money,@param4 money output
   with encryption  ---------加密
    as
   insert book(编号,书名，价格） Values(@param1,@param2,@param3)
   select @param4=sum(价格) from book
  go


执行例子:
  declare @total_price money
  exec insert_book '003','Delphi 控件开发指南',$100,@total_price
  print '总金额为'+convert(varchar,@total_price)
  go

存储过程的3种传回值:
   1.以Return传回整数
   2.以output格式传回参数
   3.Recordset

传回值的区别:
       output和return都可在批次程式中用变量接收,而recordset则传回到执行批次的客户端中  

实例3：设有两个表为Product,Order,其表内容如下：

      Product
           产品编号       产品名称    客户订数     
            001             钢笔         30         
            002             毛笔         50        
            003             铅笔         100        
      order  
           产品编号         客户名     客户订金
            001              南山区      $30
            002              罗湖区      $50
            003              宝安区      $4

请实现按编号为连接条件,将两个表连接成一个临时表,该表只含编号.产品名.客户名.订金.总金额,
总金额=订金*订数,临时表放在存储过程中

 代码如下:
     Create proc temp_sale
     as
       select a.产品编号,a.产品名称,b.客户名,b.客户订金,a.客户订数* b.客户订金 as总金额
       into #temptable from Product a inner join order b on a.产品编号=b.产品编号
    if  @@error=0
       print 'Good'
    else
       print 'Fail'
     go

SQL存储过程学习:存储过程的调用

调用带参数存储过程的几种方式
1） 这也是最简单的方法,两个输入参数，无返回值,用于Insert,Update,Delete操作较多。
   conn.Execute "procname varvalue1,varvalue2"  

2) 如果要返回 Recordset 集:
   set rs = server.createobject("adodb.recordset")
   rs.Open "Exec procname varvalue1, varvalue2",conn

3) 以上两种方法都不能有返回值，（Recordset除外），如果要得到返回值，需要用Command的方法。  
   首先说明，返回值有两种。一种是在存储过程中直接return一个值，就象C和VB的函数返回值那样；另一种是可以返回多个值，存储这些值的变量名称需要在调用参数中先行指定。


特殊的存储过程-触发器

1.触发器的概念及作用
    触发器是一种特殊类型的存储过程，它不同于我们前面介绍过的存储过程。触发器主要是通过事件进行触发而被执行的，而存储过程可以通过存储过程名字而被直接调用。当对某一表进行诸如Update、 Insert、 Delete 这些操作时，SQL Server 就会自动执行触发器所定义的SQL 语句，从而确保对数据的处理必须符合由这些SQL 语句所定义的规则。

    触发器的主要作用就是其能够实现由主键和外键所不能保证的复杂的参照完整性和数据的一致性。除此之外，触发器还有其它许多不同的功能：
（1） 强化约束（Enforce restriction）
 触发器能够实现比CHECK 语句更为复杂的约束。
（2） 跟踪变化Auditing changes
 触发器可以侦测数据库内的操作，从而不允许数据库中未经许可的指定更新和变化。
（3） 级联运行（Cascaded operation）。
触发器可以侦测数据库内的操作，并自动地级联影响整个数据库的各项内容。例如，某个表上的触发器中包含有对另外一个表的数据操作（如删除，更新，插入）而该操作又导致该表上触发器被触发。
（4） 存储过程的调用（Stored procedure invocation）。
为了响应数据库更新触，发器可以调用一个或多个存储过程，甚至可以通过外部过程的调用而在DBMS（ 数据库管理系统）本身之外进行操作。
    由此可见，触发器可以解决高级形式的业务规则或复杂行为限制以及实现定制记录等一些方面的问题。例如，触发器能够找出某一表在数据修改前后状态发生的差异，并根据这种差异执行一定的处理。此外一个表的同一类型（Insert、 Update、 Delete）的多个触发器能够对同一种数据操作采取多种不同的处理。
     总体而言，触发器性能通常比较低。当运行触发器时，系统处理的大部分时间花费在参照其它表的这一处理上，因为这些表既不在内存中也不在数据库设备上，而删除表和插入表总是位于内存中。可见触发器所参照的其它表的位置决定了操作要花费的时间长短。

2.触发器的种类
  SQL Server 2000 支持两种类型的触发器：AFTER 触发器和INSTEAD OF 触发器。其中AFTER 触发器即为SQL Server 2000 版本以前所介绍的触发器。该类型触发器要求只有执行某一操作（Insert Update Delete） 之后，触发器才被触发，且只能在表上定义。可以为针对表的同一操作定义多个触发器。对于AFTER 触发器，可以定义哪一个触发器被最先触发，哪一个被最后触发，通常使用系统过程sp_settriggerorder 来完成此任务。
     INSTEAD OF 触发器表示并不执行其所定义的操作（Insert、 Update、 Delete），而仅是执行触发器本身。既可在表上定义INSTEAD OF 触发器，也可以在视图上定义INSTEAD OF 触发器，但对同一操作只能定义一个INSTEAD OF 触发器。  


数据库中视图的作用  
       * 简单性。看到的就是需要的。视图不仅可以简化用户对数据的理解，也可以简化他们的操作。那些被经常使用的查询可以被定义为视图，从而使得用户不必为以后的操作每次指定全部的条件。
       * 安全性。通过视图用户只能查询和修改他们所能见到的数据。数据库中的其它数据则既看不见也取不到。数据库授权命令可以使每个用户对数据库的检索限制到特定的数据库对象上，但不能授权到数据库特定行和特定的列上。通过视图，用户可以被限制在数据的不同子集上：
       使用权限可被限制在基表的行的子集上。
       使用权限可被限制在基表的列的子集上。
       使用权限可被限制在基表的行和列的子集上。
       使用权限可被限制在多个基表的连接所限定的行上。
       使用权限可被限制在基表中的数据的统计汇总上。
       使用权限可被限制在另一视图的一个子集上，或是一些视图和基表合并后的子集上。

       * 逻辑数据独立性。视图可帮助用户屏蔽真实表结构变化带来的影响。

二、视图的优点
       (1)视图能简化用户的操作
       (2)视图机制可以使用户以不同的方式查询同一数据
       (3)视图对数据库重构提供了一定程度的逻辑独立性
       (4)视图可以对机密的数据提供安全保护

三、视图的安全性
       视图的安全性可以防止未授权用户查看特定的行或列，是用户只能看到表中特定行的方法如下：
       1 在表中增加一个标志用户名的列；
       2 建立视图，是用户只能看到标有自己用户名的行；
       3 把视图授权给其他用户。

四、逻辑数据独立性
       视图可以使应用程序和数据库表在一定程度上独立。如果没有视图，应用一定是建立在表上的。有了视图之后，程序可以建立在视图之上，从而程序与数据库表被视图分割开来。视图可以在以下几个方面使程序与数据独立：
       1 如果应用建立在数据库表上，当数据库表发生变化时，可以在表上建立视图，通过视图屏蔽表的变化，从而应用程序可以不动。
       2 如果应用建立在数据库表上，当应用发生变化时，可以在表上建立视图，通过视图屏蔽应用的变化，从而使数据库表不动。
       3 如果应用建立在视图上，当数据库表发生变化时，可以在表上修改视图，通过视图屏蔽表的变化，从而应用程序可以不动。
       4 如果应用建立在视图上，当应用发生变化时，可以在表上修改视图，通过视图屏蔽应用的变化，从而数据库可以不动。

五、视图的书写格式

CREATE VIEW <视图名>[(列名组)]
AS <子查询>
DROP VIEW <索引名>

注意：视图可以和基本表一样被查询，但是利用视图进行数据增，删，改操作，会受到一定的限制。
（1）由两个以上的基本表导出的视图
（2）视图的字段来自字段表达式函数
（3）视图定义中有嵌套查询
（4）在一个不允许更新的视图上定义的视图


什么是索引

　　索引是建立在表的一列或多个列上的辅助对象，目的是加快访问表中的数据；

　　Oracle存储索引的数据结构是B*树，位图索引也是如此，只不过是叶子节点不同B*数索引；

　　索引由根节点、分支节点和叶子节点组成，上级索引块包含下级索引块的索引数据，叶节点包含索引数据和确定行实际位置的rowid。

　　使用索引的目的
　　加快查询速度
　　减少I/O操作
　　消除磁盘排序

　　何时使用索引
　　查询返回的记录数
　　排序表<40%
　　非排序表 <7%
　　表的碎片较多（频繁增加、删除）

　　索引的种类
　　非唯一索引（最常用）
　　唯一索引
　　位图索引
　　局部有前缀分区索引
　　局部无前缀分区索引
　　全局有前缀分区索引
　　散列分区索引
　　基于函数的索引

　　管理索引的准则

　　在表中插入数据后创建索引

　　。在用SQL*Loader或import工具插入或装载数据后，建立索引比较有效；

　　索引正确的表和列

　　。经常检索排序大表中40%或非排序表7%的行，建议建索引；
　　。为了改善多表关联，索引列用于联结；
　　。列中的值相对比较唯一；
　　。取值范围（大：B*树索引，小：位图索引）；
　　。Date型列一般适合基于函数的索引；
　　。列中有许多空值，不适合建立索引

　　为性能而安排索引列

　　。经常一起使用多个字段检索记录，组合索引比单索引更有效；
　　。把最常用的列放在最前面，例：dx_groupid_serv_id(groupid,serv_id)，在where条件中使用groupid或groupid,serv_id，查询将使用索引，若仅用到serv_id字段，则索引无效；
　　。合并/拆分不必要的索引。

　　限制每个表索引的数量

　　。一个表可以有几百个索引（你会这样做吗？），但是对于频繁插入和更新表，索引越多系统CPU，I/O负担就越重；
　　。建议每张表不超过5个索引。

　　删除不再需要的索引

　　。索引无效，集中表现在该使用基于函数的索引或位图索引，而使用了B*树索引；
　　。应用中的查询不使用索引；
　　。重建索引之前必须先删除索引，若用alter index … rebuild重建索引，则不必删除索引。

　　索引数据块空间使用

　　。创建索引时指定表空间，特别是在建立主键时，应明确指定表空间；
　　。合理设定pctfress，注意：不能给索引指定pctused；
　　。估计索引的大小和合理地设置存储参数，默认为表空间大小，或initial与next设置成一样大。

　　考虑并行创建索引

　　。对大表可以采用并行创建索引，在并行创建索引时，存储参数被每个查询服务器进程分别使用，例如：initial为1M，并行度为8，则创建索引期间至少要消耗8M空间；

　　考虑用nologging创建索引

　　。对大表创建索引可以使用nologging来减少重做日志；
　　。节省重做日志文件的空间；
　　。缩短创建索引的时间；
　　。改善了并行创建大索引时的性能。

　　怎样建立最佳索引

　　明确地创建索引
　　create index index_name on table_name(field_name)
　　tablespace tablespace_name
　　pctfree 5
　　initrans 2
　　maxtrans 255
　　storage
　　(
　　minextents 1
　　maxextents 16382
　　pctincrease 0
　　);

　　创建基于函数的索引
　　。常用与UPPER、LOWER、TO_CHAR(date)等函数分类上，例：
　　create index idx_func on emp (UPPER(ename)) tablespace tablespace_name;

　　创建位图索引
　　。对基数较小，且基数相对稳定的列建立索引时，首先应该考虑位图索引，例：
　　create bitmap index idx_bitm on class (classno) tablespace tablespace_name;

　　明确地创建唯一索引
　　。可以用create unique index语句来创建唯一索引，例：
　　create unique index dept_unique_idx on dept(dept_no) tablespace idx_1;

　　创建与约束相关的索引
　　。可以用using index字句，为与unique和primary key约束相关的索引，例如：
　　alter table table_name
　　add constraint PK_primary_keyname primary key (field_name)
　　using index tablespace tablespace_name；

　　如何创建局部分区索引

　　。基础表必须是分区表；
　　。分区数量与基础表相同；
　　。每个索引分区的子分区数量与相应的基础表分区相同；
　　。基础表的子分区中的行的索引项，被存储在该索引的相应的子分区中,例如:
　　Create Index TG_CDR04_SERV_ID_IDX On TG_CDR04(SERV_ID)
　　Pctfree 5
　　Tablespace TBS_AK01_IDX
　　Storage (
　　MaxExtents 32768
　　PctIncrease 0
　　FreeLists 1
　　FreeList Groups 1
　　)
　　local
　　/

　　如何创建范围分区的全局索引

　　。基础表可以是全局表和分区表。
　　create index idx_start_date on tg_cdr01(start_date)
　　global partition by range(start_date)
　　(partition p01_idx vlaues less than (‘0106’)
　　partition p01_idx vlaues less than (‘0111’)
　　…
　　partition p01_idx vlaues less than (‘0401’ ))
　　/

　　重建现存的索引
　　重建现存的索引的当前时刻不会影响查询；
　　重建索引可以删除额外的数据块；
　　提高索引查询效率；
　　alter index idx_name rebuild nologging;
　　对于分区索引：
　　alter index idx_name rebuild partition partiton_name nologging;

　　要删除索引的原因

　　。不再需要的索引；
　　。索引没有针对其相关的表所发布的查询提供所期望的性能改善；
　　。应用没有用该索引来查询数据；
　　。该索引无效，必须在重建之前删除该索引；
　　。该索引已经变的太碎了，必须在重建之前删除该索引；
　　。语句：drop index idx_name;drop index idx_name drop partition partition_name;

　　建立索引的代价

　　基础表维护时，系统要同时维护索引，不合理的索引将严重影响系统资源，主要表现在CPU和I/O上；

　　插入、更新、删除数据产生大量db file sequential read锁等待；

　　SQL优化器简介

　　基于规则的优化器

　　。总是使用索引
　　。总是从驱动表开始（from子句最右边的表）
　　。只有在不可避免的情况下，才使用全表扫描
　　。任何索引都可以

　　基于成本的优化器

　　。需要表、索引的统计资料
　　Analyze table customer compute statistics;
　　Analyze table customer estimate statistics sample 5000 rows;
　　。表中设置并行度、表分区

　　优化器模式

　　rule模式

　　。总忽略CBO和统计信息而基于规则
　　choose模式

　　。Oracle根据情况选择rule or first_rows or all_rows
　　first_rows 模式

　　。基于成本，以最快的速度返回记录，会造成总体查询速度的下降或消耗更多的资源，倾向索引扫描，适合OLTP系统
　　all_rows模式

　　。基于成本，确保总体查询时间最短，倾向并行全表扫描

　　例如：
　　Select last_name from customer order by last_name;用first_rows时，迅速返回记录，但I/O量大，用all_rows时，返回记录慢，但使用资源少。

　　调整SQL表访问

　　全表扫描

　　。返回记录：未排序表>40%，排序表>7%，建议采用并行机制来提高访问速度，DDS；

　　索引访问

　　。最常用的方法，包括索引唯一扫描和索引范围扫描，OLTP；

　　快速完全索引扫描

　　。访问索引中所有数据块，结果相当于全表扫描，可以用索引扫描代替全表扫描，例如：

　　Select serv_id,count(* ) from tg_cdr01 group by serv_id;

　　评估全表扫描的合法性

　　如何实现并行扫描

　　。永久并行化（不推荐）
　　alter table customer parallel degree 8;

　　。单个查询并行化
　　select * from emp;

　　分区表效果明显

　　优化SQL语句排序

　　排序的操作：

　　。order by 子句
　　。group by 子句
　　。select distinct子句
　　。创建索引时
　　。union或minus
　　。排序合并连接

　　如何避免排序

　　。添加索引
　　。在索引中使用distinct子句
　　。避免排序合并连接

　　使用提示进行调整

　　使用提示的原则

　　。语法：
　　。使用表别名:select * from emp e
　　。检验提示

　　常用的提示

　　。rule
　　。all_rows
　　。first_rows
　　。use_nl
　　。use_hash
　　。use_merge
　　。index
　　。index_asc
　　。no_index
　　。index_desc（常用于使用max内置函数）
　　。index_combine(强制使用位图索引)
　　。index_ffs（索引快速完全扫描）
　　。use_concat(将查询中所有or条件使用union all)
　　。parallel
　　。noparallel
　　。full
　　。ordered（基于成本）

　　调整表连接

　　表连接的类型

　　。等连接
　　where 条件中用等式连接；
　　。外部连接（左、右连接）

　　在where条件子句的等式谓词放置一个(+)来实现，例如：
　　select a.ename,b.comm from emp a,bonus b where a.ename=b.ename(+);

　　该语句返回所有emp表的记录；
　　。自连接
　　　Select a.value total, B.value hard, (A.value - b.value) soft ,
　　Round((b.value/a.value)*100,1) perc
　　From v$sysstat a,v$sysstat b
　　Where a.statistic# = 179
　　and B.statistic# = 180;

　　反连接

　　反连接常用于not in or not exists中，是指在查询中找到的任何记录都不包含在结果集中的子查询；不建议使用not in or not exists;

　　。半连接

　　查询中使用exists，含义：即使在子查询中返回多条重复的记录，外部查询也只返回一条记录。

　　嵌套循环连接

　　。被连接表中存在索引的情况下使用；
　　。使用use_nl。

　　hash连接

　　。Hash连接将驱动表加载在内存中，并使用hash技术连接第二个表，提高等连接速度。
　　。适合于大表和小表连接；
　　。使用use_hash。

　　排序合并连接

　　。排序合并连接不使用索引
　　。使用原则：

　　连接表子段中不存在可用索引；

　　查询返回两个表中大部分的数据快；

　　CBO认为全表扫描比索引扫描执行的更快。

　　。使用use_merge

　　使用临时/中间表

　　多个大表关联时，可以分别把满足条件的结果集存放到中间表，然后用中间表关联；

　　SQL子查询的调整

　　关联与非关联子查询

　　。关联：子查询的内部引用的是外部表，每行执行一次；
　　。非关联：子查询只执行一次，存放在内存中。

　　调整not in 和not exists语句

　　。可以使用外部连接优化not in子句，例如：
　　select ename from emp where dept_no not in
　　(select dept_no from dept where dept_name =‘Math’);

　　改为：
　　select ename from emp,dept
　　where emp.dept_no=dept.dept_no
　　and dept.dept_name is null;

　　使用索引调整SQL

　　Oracle 为什么不使用索引

　　。检查被索引的列或组合索引的首列是否出现在PL/SQL语句的WHERE子句中，这是“执行计划”能用到相关索引的必要条件。

　　。看采用了哪种类型的连接方式。ORACLE的共有Sort Merge Join（SMJ）、Hash Join（HJ）和Nested Loop Join（NL）。在两张表连接，且内表的目标列上建有索引时，只有Nested Loop才能有效地利用到该索引。SMJ即使相关列上建有索引，最多只能因索引的存在，避免数据排序过程。HJ由于须做HASH运算，索引的存在对数据查询速度几乎没有影响。

　　。看连接顺序是否允许使用相关索引。假设表emp的deptno列上有索引，表dept的列deptno上无索引，WHERE语句有emp.deptno=dept.deptno条件。在做NL连接时，emp做为外表，先被访问，由于连接机制原因，外表的数据访问方式是全表扫描，emp.deptno上的索引显然是用不上，最多在其上做索引全扫描或索引快速全扫描。

　　。是否用到系统数据字典表或视图。由于系统数据字典表都未被分析过，可能导致极差的“执行计划”。但是不要擅自对数据字典表做分析，否则可能导致死锁，或系统性能下降。

　　。索引列是否函数的参数。如是，索引在查询时用不上。

　　。是否存在潜在的数据类型转换。如将字符型数据与数值型数据比较，ORACLE会自动将字符型用to_number()函数进行转换，从而导致上一种现象的发生。

　　。是否为表和相关的索引搜集足够的统计数据。对数据经常有增、删、改的表最好定期对表和索引进行分析，可用SQL语句“analyze table xxxx compute statistics for all indexes;”。ORACLE掌握了充分反映实际的统计数据，才有可能做出正确的选择。

　　。索引列的选择性不高。 　　我们假设典型情况，有表emp，共有一百万行数据，但其中的emp.deptno列，数据只有4种不同的值，如10、20、30、40。虽然emp数据行有很多，ORACLE缺省认定表中列的值是在所有数据行均匀分布的，也就是说每种deptno值各有25万数据行与之对应。假设SQL搜索条件DEPTNO=10，利用deptno列上的索引进行数据搜索效率，往往不比全表扫描的高。

　　。索引列值是否可为空（NULL）。如果索引列值可以是空值，在SQL语句中那些要返回NULL值的操作，将不会用到索引，如COUNT（*），而是用全表扫描。这是因为索引中存储值不能为全空。

　　。看是否有用到并行查询（PQO）。并行查询将不会用到索引。

　　。如果从以上几个方面都查不出原因的话，我们只好用采用在语句中加hint的方式强制ORACLE使用最优的“执行计划”。 　hint采用注释的方式，有行注释和段注释两种方式。 　如我们想要用到A表的IND_COL1索引的话，可采用以下方式： 　“SELECT * FROM A WHERE COL1 = XXX;"

　　如何屏蔽索引

　　语句的执行计划中有不良索引时，可以人为地屏蔽该索引，方法：
　　。数值型：在索引字段上加0，例如
　　select * from emp where emp_no+0 = v_emp_no;

　　。字符型：在索引字段上加‘’，例如
　　select * from tg_cdr01 where msisdn||’’=v_msisdn;