修正ORACLE表的高水位线HWM

修正ORACLE表的高水位线HWM

引自：http://wt871031.blog.163.com/blog/static/64867516201021073772/

 

HWM
=====================

1.基本概念

HWM(High Water Mark):高水位线
是数据库段管理中的一个重要概念
简单来说HWM就是在段中已经使用和没有使用的块的分界线。

在oracle请求空间的时候，如果现有的Freelist中没有足够的空间时，HWM指向的块将被标记为已使用
并且HWM将移动到下一个未使用的块

---------------------

ASSM和FLM：
从oracle9i开始，推出了新的segment管理方法，就是ASSM，和以往的FLM不同，ASSM采用二进制位图的方式管理段空间的分配
这样和以前Freelist的管理方法相比，数据库再分配空间的时候的并发性能大大提高

但ASSM的使用也有以下限制
a、ASSM只能位于本地管理的表空间
b、不能使用ASSM建立临时表空间
c、不能在ASSM的段中创建LOB对象

----------------------

HWM的检测：

通过tom的存储过程show_space可以很容易的看到空间的使用

具体代码如下：

create or replace
procedure show_space
( p_segname in varchar2,
p_owner in varchar2 default user,
p_type in varchar2 default 'TABLE',
p_partition in varchar2 default null)
as
l_free_blks number;
l_total_blocks number;
l_total_bytes number;
l_unused_blocks number;
l_unused_bytes number;
l_LastUsedExtFileId number;
l_LastUsedExtBlockId number;
l_LAST_USED_BLOCK number;
procedure p( p_label in varchar2, p_num in number )
is
begin
dbms_output.put_line( rpad(p_label,40,'.') ||
p_num );
end;
begin
dbms_space.free_blocks
( segment_owner => p_owner,
segment_name => p_segname,
segment_type => p_type,
freelist_group_id => 0,
free_blks => l_free_blks );
dbms_space.unused_space
( segment_owner => p_owner,
segment_name => p_segname,
segment_type => p_type,
total_blocks => l_total_blocks,
total_bytes => l_total_bytes,
unused_blocks => l_unused_blocks,
unused_bytes => l_unused_bytes,
LAST_USED_EXTENT_FILE_ID => l_LastUsedExtFileId,
LAST_USED_EXTENT_BLOCK_ID => l_LastUsedExtBlockId,
LAST_USED_BLOCK => l_LAST_USED_BLOCK );

p( 'Free Blocks', l_free_blks );
p( 'Total Blocks', l_total_blocks );
p( 'Total Bytes', l_total_bytes );
p( 'Unused Blocks', l_unused_blocks );
p( 'Unused Bytes', l_unused_bytes );
p( 'Last Used Ext FileId', l_LastUsedExtFileId );
p( 'Last Used Ext BlockId', l_LastUsedExtBlockId );
p( 'Last Used Block', l_LAST_USED_BLOCK );
end;
/

---------------

实验：

SQL> create table t001 as select * from all_tables;
表已创建。

SQL> exec show_space('T001');
PL/SQL 过程已成功完成。

SQL> SET SERVEROUTPUT ON
SQL> exec show_space('T001');
Free Blocks.............................0
Total Blocks............................40
Total Bytes.............................327680
Unused Blocks...........................2
Unused Bytes............................16384
Last Used Ext FileId....................1
Last Used Ext BlockId...................33249
Last Used Block.........................6

PL/SQL 过程已成功完成。

SQL> INSERT INTO T001 NOLOGGING SELECT * FROM T001;
已创建1220行。

SQL> /
已创建2440行。

SQL> /
已创建4880行。

SQL> /
已创建9760行。

SQL> /
已创建19520行。

SQL> COMMIT;
提交完成。

SQL> exec show_space('T003');
Free Blocks.............................895
Total Blocks............................1152
Total Bytes.............................9437184
Unused Blocks...........................71
Unused Bytes............................581632
Last Used Ext FileId....................1
Last Used Ext BlockId...................35593
Last Used Block.........................57

PL/SQL 过程已成功完成。

大量插入导致HWM上升

SQL> select count(*) from t001;
COUNT(*)
----------
     39040

SQL> delete from t001 where rownum<30001;
已删除30000行。

SQL> commit;
提交完成。

SQL> exec show_space('T003');
Free Blocks.............................895
Total Blocks............................1152
Total Bytes.............................9437184
Unused Blocks...........................71
Unused Bytes............................581632
Last Used Ext FileId....................1
Last Used Ext BlockId...................35593
Last Used Block.........................57

PL/SQL 过程已成功完成。

大量删除数据后也没有使HWM下降

-------------------------

影响：
在读数据的时候，只要是表曾经使用过的HWM下的所有快都会被扫描
如果大量删除数据后没有使HWM降低，就会多读取很多无效的块，会影响数据库的性能

------------------------

降低HWM的方法

MOVE

SQL> alter table t003 move;

表已更改。

SQL> exec show_space('T003');
Free Blocks.............................0
Total Blocks............................256
Total Bytes.............................2097152
Unused Blocks...........................71
Unused Bytes............................581632
Last Used Ext FileId....................1
Last Used Ext BlockId...................33545
Last Used Block.........................57

PL/SQL 过程已成功完成。

占用可字节数以及块数降低下来

:MOVE后索引要重建

--------------------------

TRUNCATE TABLE

SQL> create table t007 as select * from t003;
表已创建。

SQL> truncate table t003;
表被截断。

SQL> exec show_space('T003');
Free Blocks.............................0
Total Blocks............................8
Total Bytes.............................65536
Unused Blocks...........................7
Unused Bytes............................57344
Last Used Ext FileId....................1
Last Used Ext BlockId...................33217
Last Used Block.........................1

PL/SQL 过程已成功完成。

SQL> insert into t003 select * from t007;

这样也可以把HWM降下来

----------------------------

从ORACLE10g开始，有了shrink命令，如果表空间是ASSM的，可以用这个命令来降低HWM

SQL> CREATE TABLE T001 TABLESPACE ASSM AS SELECT * FROM ALL_TABLES;

表已创建。

SQL> ALTER TABLE T001 ENABLE ROW MOVEMENT;

表已更改。

SQL> DELETE FROM T001 WHERE ROWNUM<1001;

已删除1000行。

SQL> COMMIT;

提交完成。

SQL> ALTER TABLE T001 SHRINK SPACE;

表已更改。

这样也可以降低HWM

---------------------------------------------------------------------------------------------------------------------------------

下面的方法都可以降低高水位线标记。

1. 执行表重建指令 alter table table_name move;

在线转移表空间ALTER TABLE ... MOVE TABLESPACE ..

当你创建了一个对象如表以后,不管你有没有插入数据,它都会占用一些块,ORACLE也会给它分配必要的空间.同样,用ALTER TABLE MOVE释放自由空间后,还是保留了一些空间给这个表. 

ALTER TABLE ... MOVE 后面不跟参数也行，不跟参数表还是在原来的表空间，Move后记住重建索引. 查询失效索引语句：select index_name,table_name,tablespace_name,status From dba_indexes Where wner='HNUNICOM' And status<>'VALID';重建索引语句：alter index INDEX_NAME rebuild tablespace TABLESPACE_NAME;
如果以后还要继续向这个表增加数据，没有必要move， 只是释放出来的空间，只能这个表用，其他的表或者segment无法使用该空间。

2. 执行alter table table_name shrink space;

注意，此命令为Oracle 10g新增功能，再执行该指令之前必须允许行移动 alter table table_name enable row movement;

3. 复制要保留的数据到临时表t，drop原表，然后rename临时表t为原表

4. 用逻辑导入导出: Emp/Imp

5. Alter table table_name deallocate unused

注：这证明,DEALLOCATE UNUSED为释放HWM上面的未使用空间,但是并不会释放HWM下面的自由空间,也不会移动HWM的位置.

6. 尽量使用truncate.

---------------------------------------------------------------------------------------------------------------------------------

注意：

在9I中:

1. 如果是INEXTENT， 可以使ALTER TABLE TABLENAME DEALLOCATE UNUSED将HWM以上所有没使用的空间释放

2. 如果MINEXTENT >HWM 则释放MINEXTENTS 以上的空间。如果要释放HWM以上的空间则使用KEEP 0。

ALTER TABLE TABLESNAME DEALLOCATE UNUSED KEEP 0;

3. TRUNCATE TABLE DROP STORAGE(缺省值)命令可以将MINEXTENT 之上的空间完全释放(交还给操作系统),并且重置HWM。

4. 如果仅是要移动HWM,而不想让表长时间锁住,可以用TRUNCATE TABLE REUSE STORAGE,仅将HWM重置。

5. ALTER TABLE MOVE会将HWM移动,但在MOVE时需要双倍的表空间,而且如果表上有索引的话,需要重构索引

6. DELETE表不会重置HWM,也不会释放自由的空间(也就是说DELETE空出来的空间只能给对象本身将来的INSERT/UPDATE使用,不能给其它的对象使用)

在ORACLE 10G:

1. 可以使用ALTER TABLE TEST_TAB SHRINK SPACE命令来联机移动HWM,

2. 如果要同时压缩表的索引,可以发布:ALTER TABLE TEST_TAB SHRINK SPACE CASCADE

----------------------------------------------------------------------------------------------------------------------------------

HWM 特点：

1. ORACLE用HWM来界定一个段中使用的块和未使用的块.

举个例子来说,当我们创建一个表时,ORACLE就会为这个对象分配一个段.在这个段中,即使我们未插入任何记录,也至少有一个区被分配,第一个区的第一个块就称为段头(SEGMENT HEADE),段头中就储存了一些信息,基中HWM的信息就存储在此.此时,因为第一个区的第一块用于存储段头的一些信息,虽然没有存储任何实际的记录,但也算是被使用,此时HWM是位于第2个块.当我们不断插入数据到表后,第1个块已经放不下后面新插入的数据,此时,ORACLE将高水位之上的块用于存储新增数据,同时,HWM本身也向上移.也就是说,当我们不断插入数据时,HWM会往不断上移,这样,在HWM之下的,就表示使用过的块,HWM之上的就表示已分配但从未使用过的块.

2. HWM在插入数据时,当现有空间不足而进行空间的扩展时会向上移,但删除数据时不会往下移.

这就好比是水库的水位,当涨水时,水位往上移,当水退出后,最高水位的痕迹还是清淅可见.

ORACLE 不会释放空间以供其他对象使用，有一条简单的理由：由于空间是为新插入的行保留的，并且要适应现有行的增长。被占用的最高空间称为最高使用标记 (HWM)，

3. HWM的信息存储在段头当中.

HWM本身的信息是储存在段头.在段空间是手工管理方式时,ORACLE是通过FREELIST(一个单向链表)来管理段内的空间分配.在段空间是自动管理方式时(ASSM),ORACLE是通过BITMAP来管理段内的空间分配.

4. ORACLE的全表扫描是读取高水位标记(HWM)以下的所有块.

所以问题就产生了.当用户发出一个全表扫描时，ORACLE 始终必须从段一直扫描到 HWM，即使它什么也没有发现。该任务延长了全表扫描的时间。

5. 当用直接路径插入行时，即使HWM以下有空闲的数据库块，键入在插入数据时使用了append关键字，则在插入时使用HWM以上的数据块，此时HWM会自动增大。

例如，通过直接加载插入（用 APPEND 提示插入）或通过 SQL*LOADER 直接路径 数据块直接置于 HWM 之上。它下面的空间就浪费掉了。

----------------------------------------------------------------------------------------------------------------------------------

Oracle表段中的高水位线HWM    

在Oracle数据的存储中，可以把存储空间想象为一个水库，数据想象为水库中的水。水库中的水的位置有一条线叫做水位线，在Oracle中，这条线被称为高水位线（High-warter mark, HWM）。在数据库表刚建立的时候，由于没有任何数据，所以这个时候水位线是空的，也就是说HWM为最低值。当插入了数据以后，高水位线就会上涨，但是这里也有一个特性，就是如果你采用delete语句删除数据的话，数据虽然被删除了，但是高水位线却没有降低，还是你刚才删除数据以前那么高的水位。也就是说，这条高水位线在日常的增删操作中只会上涨，不会下跌。

下面我们来谈一下Oracle中Select语句的特性。Select语句会对表中的数据进行一次扫描，但是究竟扫描多少数据存储块呢，这个并不是说数据库中有多少数据，Oracle就扫描这么大的数据块，而是Oracle会扫描高水位线以下的数据块。现在来想象一下，如果刚才是一张刚刚建立的空表，你进行了一次Select操作，那么由于高水位线HWM在最低的0位置上，所以没有数据块需要被扫描，扫描时间会极短。而如果这个时候你首先插入了一千万条数据，然后再用delete语句删除这一千万条数据。由于插入了一千万条数据，所以这个时候的高水位线就在一千万条数据这里。后来删除这一千万条数据的时候，由于delete语句不影响高水位线，所以高水位线依然在一千万条数据这里。这个时候再一次用select语句进行扫描，虽然这个时候表中没有数据，但是由于扫描是按照高水位线来的，所以需要把一千万条数据的存储空间都要扫描一次，也就是说这次扫描所需要的时间和扫描一千万条数据所需要的时间是一样多的。所以有时候有人总是经常说，怎么我的表中没有几条数据，但是还是这么慢呢，这个时候其实奥秘就是这里的高水位线了。

    那有没有办法让高水位线下降呢，其实有一种比较简单的方法，那就是采用TRUNCATE语句进行删除数据。采用TRUNCATE语句删除一个表的数据的时候，类似于重新建立了表，不仅把数据都删除了，还把HWM给清空恢复为0。所以如果需要把表清空，在有可能利用TRUNCATE语句来删除数据的时候就利用TRUNCATE语句来删除表，特别是那种数据量有可能很大的临时存储表。

    在手动段空间管理（Manual Segment Space Management）中，段中只有一个HWM，但是在Oracle 9i Release1才添加的自动段空间管理（Automatic Segment Space Management）中，又有了一个低HWM的概念出来。为什么有了HWM还又有一个低HWM呢，这个是因为自动段空间管理的特性造成的。在手段段空间管理中，当数据插入以后，如果是插入到新的数据块中，数据块就会被自动格式化等待数据访问。而在自动段空间管理中，数据插入到新的数据块以后，数据块并没有被格式化，而是在第一次访问这个数据块的时候才格式化这个块。所以我们又需要一条水位线，用来标示已经被格式化的块。这条水位线就叫做低HWM。一般来说，低HWM肯定是低于等于HWM的。

 

 

 

来自 “ ITPUB博客 ” ，链接：http://blog.itpub.net/276487/viewspace-673774/，如需转载，请注明出处，否则将追究法律责任。

转载于:http://blog.itpub.net/276487/viewspace-673774/