java分批加载,Oracle的Nologging何时生效与批量insert加载数据速度(zt)-CSDN博客

一非归档模式下

D:>sqlplus "/ as sysdba"

数据库版本为9.2.0.1.0

SQL*Plus: Release 9.2.0.1.0 - Production on 星期一 8月 14 10:20:39 2006

连接到:

Oracle9i Enterprise Edition Release 9.2.0.1.0 - Production

With the Partitioning, OLAP and Oracle Data Mining options

JServer Release 9.2.0.1.0 - Production

当前session产生的redo

SQL> create or replace view redo_size

2 as

3 select value

4 from v$mystat, v$statname

5 where v$mystat.statistic# = v$statname.statistic#

6 and v$statname.name = 'redo size';

视图已建立。

授权给相应数据库schema

SQL> grant select on redo_size to liyong;

授权成功。

SQL> shutdown immediate;

数据库已经关闭。

已经卸载数据库。

ORACLE 例程已经关闭。

SQL> startup mount;

ORACLE 例程已经启动。

Total System Global Area 122755896 bytes

Fixed Size 453432 bytes

Variable Size 88080384 bytes

Database Buffers 33554432 bytes

Redo Buffers 667648 bytes

数据库装载完毕。

非归档模式

SQL> alter database noarchivelog;

数据库已更改。

SQL> alter database open;

数据库已更改。

SQL> create table redo_test as

2 select * from all_objects where 1=2;

表已创建。

SQL> select * from sys.redo_size;

VALUE

----------

59488

SQL> insert into redo_test

2 select * from all_objects;

已创建28260行。

SQL> select * from sys.redo_size;

VALUE

----------

3446080

SQL> insert /*+ append */ into redo_test

2 select * from all_objects;

已创建28260行。

SQL> commit;

提交完成。

SQL> select * from sys.redo_size;

VALUE

----------

3458156

可以看到insert /*+ append */ into方式redo产生很少.

SQL> select 3446080-59488,3458156-3446080 from dual;

3446080-59488 3458156-3446080

------------- ---------------

3386592 12076

将表redo_test置为nologging状态.

SQL> alter table redo_test nologging;

表已更改。

SQL> select * from sys.redo_size;

VALUE

----------

3460052

SQL> insert into redo_test

2 select * from all_objects;

已创建28260行。

SQL> commit;

提交完成。

SQL> select * from sys.redo_size;

VALUE

----------

6805876

SQL> insert /*+ append */ into redo_test

2 select * from all_objects;

已创建28260行。

SQL> commit;

提交完成。

SQL> select * from sys.redo_size;

VALUE

----------

6818144

非归档模式下表的nologging状态对于redo影响不大

SQL> select 6805876-3460052,6818144-6805876 from dual;

6805876-3460052 6818144-6805876

--------------- ---------------

3345824 12268

结论: 在非归档模式下通过insert /*+ append */ into方式批量加载数据可以大大减少redo产生.

二归档模式下

SQL> shutdown immediate;

数据库已经关闭。

已经卸载数据库。

ORACLE 例程已经关闭。

SQL> startup mount;

ORACLE 例程已经启动。

Total System Global Area 122755896 bytes

Fixed Size 453432 bytes

Variable Size 88080384 bytes

Database Buffers 33554432 bytes

Redo Buffers 667648 bytes

数据库装载完毕。

SQL> alter database archivelog;

数据库已更改。

SQL> alter database open;

数据库已更改。

SQL> conn liyong

请输入口令:

已连接。

将表redo_test重新置为logging

SQL> alter table redo_test logging;

表已更改。

SQL> select * from sys.redo_size;

VALUE

----------

5172

SQL> insert into redo_test

2 select * from all_objects;

已创建28260行。

SQL> commit;

提交完成。

SQL> select * from sys.redo_size;

VALUE

----------

3351344

SQL> insert /*+ append */ into redo_test

2 select * from all_objects;

已创建28260行。

SQL> commit;

提交完成。

SQL> select * from sys.redo_size;

VALUE

----------

6659932

可以看到在归档模式下，且表的logging属性为true,insert /*+ append */ into这种方式也会纪录大量redo

SQL> select 3351344-5172,6659932-3351344 from dual;

3351344-5172 6659932-3351344

------------ ---------------

3346172 3308588

将表置为nologging

SQL> alter table redo_test nologging;

表已更改。

SQL> select * from sys.redo_size;

VALUE

----------

6661820

SQL> insert into redo_test

2 select * from all_objects;

已创建28260行。

SQL> commit;

提交完成。

SQL> select * from sys.redo_size;

VALUE

----------

10008060

SQL> insert /*+ append */ into redo_test

2 select * from all_objects;

已创建28260行。

SQL> commit;

提交完成。

SQL> select * from sys.redo_size;

VALUE

----------

10022852

可以发现在归档模式，要设置表的logging属性为false，才能通过insert /*+ append */ into大大减少redo产生.

SQL> select 10008060-6661820,10022852-10008060 from dual;

10008060-6661820 10022852-10008060

---------------- -----------------

3346240 14792

结论: 在归档模式下,要设置表的logging属性为false，

才能通过insert /*+ append */ into大大减少redo.

三下面我们再看一下在归档模式下，几种批量insert操作的效率对比.

redo_test表有45W条记录

SQL> select count(*) from redo_test;

COUNT(*)

----------

452160

1 最常见的批量数据加载 25秒

SQL> create table insert_normal as

2 select * from redo_test where 0=2;

表已创建。

SQL> set timing on

SQL> insert into insert_normal

2 select * from redo_test;

已创建452160行。

提交完成。

已用时间: 00: 00: 25.00

2 使用insert /*+ append */ into方式(这个的原理可以参见<>)，但纪录redo. 17.07秒

SQL> create table insert_hwt

2 as

3 select * from redo_test where 0=2;

表已创建。

SQL> insert /*+ append */ into insert_hwt

2 select * from redo_test;

已创建452160行。

提交完成。

已用时间: 00: 00: 17.07

3 使用insert /*+ append */ into方式，且通过设置表nologging不纪录redo.

SQL> create table insert_hwt_with_nologging nologging

2 as

3 select * from redo_test where 2=0;

表已创建。

或者通过

alter table table_name nologging设置

SQL> insert /*+ append */ into insert_hwt_with_nologging 11.03秒

2 select * from redo_test;

已创建452160行。

提交完成。

已用时间: 00: 00: 11.03

总结:

我们看到对于批量操作，如果设置表nologging，可以大大提高性能.原因就是Oracle没有纪录DML所产生的redo.

java分批加载,Oracle的Nologging何时生效 与 批量insert加载数据速度(zt)

java分批加载,Oracle的Nologging何时生效与批量insert加载数据速度(zt)