达梦数据库SQL运维和优化

一、数据库使用

1、创建表空间

创建表空间（数据文件初始大小128M，每次2M扩展，数据文件最大10G）

CREATE tablespace "TEST" datafile '/dm8/data/TEST01.DBF' size 128 autoextend on next 2 maxsize 10240;

新增表空间

alter tablespace "TEST" add datafile '/dm8/data/TEST02.DBF' size 128 autoextend on next 2 maxsize 10240;

2、创建角色

create role testrole; 

grant CREATE TABLE to "testrole";

grant CREATE VIEW to "testrole";

grant CREATE INDEX to "testrole";

3、创建用户

create user testuser IDENTIFIED by Dameng123 DEFAULT TABLESPACE TEST;

------修改密码

alter user testuser identified by testuser；

4、用户授权

--------受testrole角色给testuser用户

grant "testrole" to "HRTEST";

-------受dmhr用户表employee的查询权限给testuser用户

grant select on dmhr.employee to testuser;

5、创建表

create table testtable(id int not null,name varchar(50));

6、创建索引

----创建索引指定表空间

create index ix_ name on testuser.testtable(name) STORAGE (ON USERS);

7、创建约束

主键约束

alter table hrtest.t_testpid ADD CONSTRAINT pk_testpid_pid PRIMARY KEY(pid);

外键约束（外键引用两一张表的主键或者唯一键）

alter table hrtest.t_test add CONSTRAINT fk_test_id FOREIGN KEY(id) REFERENCES hrtest.t_testpid(pid);

检验约束

alter table hrtest.t_testpid ADD CONSTRAINT ck_testpid_salary CHECK (salary>=2100);

8、新增数据

insert into testtable(name) values (‘张三’);

9、修改数据

update testable set name=’李四’;

10、删除数据

delete from testable where name=’李四’;

11、查询系统表

----索引的数据字典：

select * from dba_indexes t where t.OWNER ='HRTEST';

select * from dba_ind_columns t where t.index_OWNER ='HRTEST';

----可查询所有对象

select * from SYSOBJECTS

----可查询表的所有列的信息

select * from SYSCOLUMNS

----可查询表信息（包括系统表）

select * from dba_tables

----可查询系统所有用户

select * from dba_users

----可查询数据库文件信息

select * from dba_data_files

----可查询模式

select * from dba_segments

----可查询所有用户的表

select * from all_tables

----可查询当前用户所拥有的所有表

select * from user_tables

----可查询表空间

select * from user_tablespaces

12、查询系统视图

----可查询数据库信息

select * from v$database

----可查询表空间信息

select * from v$tablespace

----可查询数据文件信息

select * from v$datafile

----可查询归档信息

select * from v$dm_arch_ini

----可查询参数（查看表占用空间）

select * from v$dm_ini

（查看表占用空间）

SELECT TABLE_USED_PAGES('模式名', '表名') * PARA_VALUE / 1024 / 1024 "USER_USED_SPACE(MB)" FROM V$DM_INI WHERE PARA_NAME LIKE 'GLOBAL_PAGE_SIZE';

----可查询数据库实例信息

select * from v$instance

----可查询日志文件信息

select * from v$rlogfile

----可查询操作系统CPU和内存的信息

select * from v$systeminfo

----可查询数据库版本

select * from v$version

----可查询等待（wait）情况

select * from v$wait_class

----数据缓冲区

SELECT * FROM V$BUFFERpool;

SELECT * FROM V$mem_pool;

显示当前进程、线程信息

SELECT * FROM V$PROCESS;

SELECT * FROM V$threads;

二、SQL运维

1、学会使用sql执行计划

2、查询慢sql

select datediff(ss,sysdate,last_send_time) a,

       SF_GET_SESSION_SQL(SESS_ID) ,--获取完整sql

        sess_id ,

        sess_seq ,

        sql_text ,

        state ,

        seq_no ,

        user_name ,

        trx_id ,

        create_time,

        clnt_ip

       

from

        v$sessions

where state='ACTIVE' and sess_id != sessid

order by a;

3、查询阻塞锁

select * from v$lock where blocked=1;

4、查询锁等待

select * from v$trxwait;

5、按照耗时排序查询慢sql

select timestampdiff(ss,LAST_RECV_TIME,sysdate),sf_get_session_sql(sess_id),*

from SYS."V$SESSIONS"

where sess_id<>sessid

order by 6 asc,1 desc;

6、查询死锁涉及的事务信息

select

        dh.trx_id ,

        sh.sess_id,

        wm_concat(top_sql_text)

from

        V$DEADLOCK_HISTORY dh,

        V$SQL_HISTORY sh

where

        dh.trx_id =sh.trx_id

    and dh.sess_id=sh.sess_id

group by

        dh.trx_id,

        sh.sess_id

7、查询varchar类型是否以字符为单位

select sf_get_length_in_char();

8、清理归档

SF_ARCHIVELOG_DELETE_BEFORE_TIME(SYSDATE - 15);

三、SQL优化

1、SQL语句尽量用大写的

 把小写的字母转换成大写的再执行。

2、使用表的别名

 当在SQL语句中连接多个表时, 尽量使用表的别名并把别名前缀于每个列上。这样一来,

就可以减少解析的时间并减少那些由列歧义引起的语法错误。

3、WHERE子句中的连接顺序

 达梦采用自下而上的顺序解析WHERE子句,根据这个原理,表之间的连接必须写在其他

WHERE条件之前, 那些可以过滤掉最大数量记录的条件必须写在WHERE子句的末尾。

4、SELECT子句中避免使用 *

 在解析的过程中, 会将'*' 依次转换成所有的列名, 这个工作是通过查询数据字

典完成的, 这意味着将耗费更多的时间。

5、减少访问数据库的次数

 解析SQL语句,估算索引的利用率,绑定变量,读数据块等。

6、整合简单、无关联的数据库访问

 如果有几个简单的数据库查询语句,可以整合到一个查询中(即使它们之间没有关系)。

7、删除重复记录

 最高效的删除重复记录方法 ： 

 DELETE FROM TEMP E

 WHERE E.ROWID > (SELECT MIN(X.ROWID)

               FROM TEMP1 X WHERE X.TEMP_NO = E.TEMP_NO);

8、减少对表的查询

 在含有子查询的SQL语句中,要特别注意减少对表的查询。 

 SELECT TAB_NAME FROM TABLES WHERE (TAB_NAME,DB_VER) = ( SELECT

 TAB_NAME,DB_VER FROM  TAB_COLUMNS  WHERE  VERSION = 604);

9、避免使用耗费资源的操作

 带有DISTINCT、UNION、MINUS、INTERSECT、ORDER BY的SQL语句会启动SQL引擎执行

耗费资源的排序(SORT)功能。DISTINCT需要一次排序操作,而其他的至少需要执行两次排序。

通常,带有UNION、MINUS、INTERSECT的SQL语句都可以用其他方式重写。

 如果数据库的SORT_AREA_SIZE调配得好,使用UNION,MINUS,INTERSECT也是可以考虑。 

10、优化GROUP BY

 提高GROUP BY 语句的效率,可以通过将不需要的记录在GROUP BY之前过滤掉。

下面两个查询返回相同结果但明显第二个效率更高。 

低效: 

SELECT JOB,AVG(AGE) FROM TEMP

GROUP BY JOB HAVING JOB = 'STUDENT' OR JOB = 'MANAGER';

高效: 

SELECT JOB,AVG(AGE) FROM EMP

WHERE JOB = 'STUDENT' OR JOB = 'MANAGER' GROUP BY JOB;

11、根据需要用UNION ALL替换UNION

 当SQL语句需要UNION两个查询结果集合时,这两个结果集合会以UNION-ALL的方式被合并,

然后在输出最终结果前进行排序。如果用UNION ALL替代UNION, 这样排序就不是必要了。

效率就会因此得到提高。需要注意UNION ALL将重复输出两个结果集合中相同记录。因此要

从业务需求使用UNION ALL的可行性。UNION 将对结果集合排序,这个操作会使用到

SORT_AREA_SIZE这块内存。对于这块内存的优化也很重要。 

低效： 

SELECT USER_ID,BILL_ID FROM USER_TAB1 WHERE AGE = '20'

UNION

SELECT USER_ID,BILL_ID FROM USER_TAB2 WHERE AGE = '20';

高效: 

SELECT USER_ID,BILL_ID FROM USER_TAB1 WHERE AGE = '20'

UNION ALL

SELECT USER_ID,BILL_ID FROM USER_TAB2 WHERE AGE = '20';

12、用EXISTS替换DISTINCT

 当SQL包含一对多表查询时,避免在SELECT子句中使用DISTINCT,一般用EXIST替换,EXISTS

查询更为迅速,因为RDBMS核心模块将在子查询的条件一旦满足后,立刻返回结果。 

(低效): 

SELECT DISTINCT USER_ID,BILL_ID FROM USER_TAB1 D,USER_TAB2 E

WHERE D.USER_ID= E.USER_ID;

(高效): 

SELECT USER_ID,BILL_ID FROM USER_TAB1 D WHERE EXISTS(SELECT 1

       FROM USER_TAB2 E WHERE E.USER_ID= D.USER_ID);

13、尽量多使用COMMIT

 只要有可能,在程序中尽量多使用COMMIT,这样程序的性能得到提高,需求也会因为COMMIT

所释放的资源而减少。 

COMMIT所释放的资源: 

 a. 回滚段上用于恢复数据的信息。 

 b. 被程序语句获得的锁。

 c. redo log buffer 中的空间。 

 d. ORACLE为管理上述3种资源中的内部花销。

14、用Where子句替换HAVING子句

 避免使用HAVING子句,HAVING只会在检索出所有记录之后才对结果集进行过滤。这个处理需

要排序,总计等操作。最好能通过WHERE子句限制记录的数目。

(非oracle中)on、where、having这三个都可以加条件的子句中,on是最先执行,where次之,

having最后。

a、on是先把不符合条件的记录过滤后才进行统计，可以减少中间运算要处理的数据，速度是

 最快的；

b、where比having快点，因为它过滤数据后才进行sum，在两个表联接时才用on的，所以在一

个表的时候，就剩下where跟having比较了。在单表查询统计的情况下，如果要过滤的条件没

有涉及到要计算字段，那它们的结果是一样的，只是where可以使用rushmore技术，而having

就不能，在速度上后者要慢。

 如果要涉及到计算的字段，就表示在没计算之前，这个字段的值是不确定的，where的作用

时间是在计算之前就完成的，而having就是在计算后才起作用的，所以在这种情况下，两者

的结果会不同。在多表联接查询时，on比where更早起作用。系统首先根据各个表之间的关联

条件，把多个表合成一个临时表后，再由where进行过滤，然后再计算，计算完后再由having

进行过滤。

15、用TRUNCATE替代DELETE

 当删除表中的记录时,在通常情况下, 回滚段(rollback segments)用来存放可以被恢复的

信息。如果你没有COMMIT事务,ORACLE会将数据恢复到删除之前的状态(准确地说是恢复到执

行删除命令之前的状况)。而当运用TRUNCATE时,回滚段不再存放任何可被恢复的信息。当命

令运行后,数据不能被恢复。因此很少的资源被调用,执行时间也会很短。

注:TRUNCATE只在删除全表适用,TRUNCATE是DDL不是DML。

16、使用DECODE函数来减少处理时间 

 使用DECODE函数可以避免重复扫描相同记录或重复连接相同的表。

17、用EXISTS替代IN、用NOT EXISTS替代 NOT IN

 在基于基础表的查询中经常需要对另一个表进行联接。在这种情况下, 使用EXISTS(或NOT

EXISTS)通常将提高查询的效率。在子查询中,NOT IN子句将执行一个内部的排序和合并。无

论在哪种情况下,NOT IN都是最低效的(要对子查询中的表执行了一个全表遍历)。所以尽量将

NOT IN改写成外连接(Outer Joins)或NOT EXISTS。 

（高效）

SELECT A.* FROM TEMP(基础表) A WHERE AGE > 0

AND EXISTS(SELECT 1 FROM TEMP1 WHERE A.ID= ID AND NAME='TOM');

(低效)

SELECT A.* FROM TEMP(基础表) A WHERE AGE > 0

AND A.ID IN(SELECT ID FROM TEMP1 WHERE NAME ='TOM');

18、用索引提高效率

 索引是表的一个概念部分,用来提高检索数据的效率。通常通过索引查询数据比全表扫描要快。

 另一个使用索引的好处是,它提供了主键(primary key)的唯一性验证。那些LONG或LONG RAW

数据类型, 你可以索引几乎所有的列。通常在大型表中使用索引特别有效。在扫描小表时,使

用索引同样能提高效率。

 使用索引虽能得到查询效率的提高,但也必须注意到它的代价。索引需要空间来存储,也需

要定期维护, 每当有记录在表中增减或索引列被修改时, 索引本身也会被修改。这意味着每

条记录的INSERT、DELETE、UPDATE将为此多付出4、5 次的磁盘I/O。因为索引需要额外的存

储空间和处理,一些不必要的索引反而会使查询反应时间变慢。

定期的重构索引: 

ALTER INDEX <INDEXNAME> REBUILD <TABLESPACENAME>

19、用>=替代>

高效: 

SELECT * FROM TEMP WHERE ID >=4;

低效: 

SELECT * FROM TEMP WHERE ID >3;

区别:前者DBMS将直接跳到第一个ID等于4的记录而后者将首先定位到ID=3的记录并且向前扫

描到第一个ID大于3的记录。  

20、避免在索引列上使用NOT 

 NOT会产生在和在索引列上使用函数相同的影响。当ORACLE遇到NOT,就会停止使用索引转

而执行全表扫描。

21、避免在索引列上使用计算

 WHERE子句中，如果索引列是函数的一部分，优化器将不使用索引而使用全表扫描。 

低效： 

SELECT … FROM TEMP WHERE SAL * 12 > 25000;

高效: 

SELECT … FROM TEMP WHERE SAL > 25000/12;

22、用UNION替换OR(适用于索引列)

 用UNION替换WHERE子句中的OR将会起到较好的效果。对索引列使用OR将造成全表扫

描。注意,以上规则只针对多个索引列有效。如果有column没有被索引, 查询效率可能

会因为你没有选择OR而降低。

高效: 

SELECT * FROM USER_TAB1 WHERE USER_ID = 10

UNION

SELECT * FROM USER_TAB1 WHERE AGE = 20;

低效: 

SELECT * FROM USER_TAB1 WHERE USER_ID = 10 OR AGE = 20;  

23、避免在索引列上使用IS NULL和IS NOT NULL

对于单列索引，如果列包含空值，索引中将不存在此记录。

对于复合索引，如果每个列都为空，索引中同样不存在此记录。如果至少有一个列不为

空，则记录存在于索引中。

低效: (索引失效) 

SELECT … FROM  DEPARTMENT WHERE DEPT_CODE IS NOT NULL;

高效: (索引有效) 

SELECT … FROM  DEPARTMENT WHERE DEPT_CODE >=0;

24、总是使用索引的第一个列

 如果索引是建立在多个列上,只有在它的第一个列(leading column)被where子句引用时,

优化器才会选择使用该索引。

 当引用索引的第二个列时,优化器使用了全表扫描而忽略了索引。

25、用WHERE替代ORDER BY

 ORDER BY 子句只在以下两种严格的条件下使用索引：

 (1)ORDER BY中所有的列必须包含在相同的索引中并保持在索引中的排列顺序。 

 (2)ORDER BY中所有的列必须定义为非空。

 WHERE子句使用的索引和ORDER BY子句中所使用的索引不能并列。例如:  

 USER_ID PK NOT NULL

 USER_DESC NOT NULL

 USER_TYPE NULL

低效: (索引不被使用)

SELECT USER_ID FROM USER_TAB ORDER BY USER_TYPE;

高效: (使用索引)

SELECT USER_ID FROM USER_TAB WHERE USER_TYPE> 0;

26、避免改变索引列的类型

假设 USER_ID 是一个数值类型的索引列。 

SELECT … FROM USER_TAB WHERE USER_ID = '123';

SELECT … FROM USER_TAB WHERE USER_ID = TO_NUMBER('123');

幸运的是,类型转换没有发生在索引列上,索引的用途没有被改变。

现在,假设USER_TYPE是一个字符类型的索引列。

SELECT …  FROM USER_TAB WHERE USER_TYPE = 123 ;

这个语句被ORACLE转换为: 

SELECT …  FROM USER_TAB WHERE TO_NUMBER(USER_TYPE)=123;

因为内部发生的类型转换, 这个索引将不会被用到!

注：当字符和数值比较时, 会优先转换数值类型到字符类型。

SELECT …  FROM USER_TAB WHERE TO_NUMBER(USER_TYPE)=123;

27、WHERE子句

 某些SELECT 语句中的WHERE子句不使用索引。 

 (1)'!='不走索引。索引只能告诉我们什么存在于表中, 而不能告诉你什么不在表中。

 (2)'||'是字符连接函数。就象其他函数那样, 停用了索引。

 (3)'+'是数学函数。和其他数学函数一样, 停用了索引。

 (4)相同的索引列不能互相比较,这将会启用全表扫描。

28、使用索引

a.如果检索数据量超过30%的表中记录数，使用索引将没有显著的效率提高。 

b.在特定情况下,使用索引也许会比全表扫描更慢,但这是同一个数量级上的区别。

  而通常情况下,使用索引比全表扫描要块几倍乃至几千倍。

达梦学习社区地址：https://eco.dameng.com