oracle 并行cpu查询分区表测试

最新推荐文章于 2021-06-18 17:29:03 发布
最新推荐文章于 2021-06-18 17:29:03 发布
阅读量214 收藏
点赞数
文章标签： 数据库

并行cpu查询分区表测试 12月01日(星期四)

这篇文章是回应玉面飞龙所提出的均匀分布数据的情况而实验

测试均匀数据分布的并行查询与非并行查询，结果是均匀数据分布的并行查询要优于非并行查询

测试环境: OS: HP9000 DB:9201(数据文件分布在裸设备上)

[@more@]

并行cpu查询分区表测试 12月01日(星期四)

这篇文章是回应玉面飞龙所提出的均匀分布数据的情况而实验

测试均匀数据分布的并行查询与非并行查询，结果是均匀数据分布的并行查询要优于非并行查询

测试环境: OS: HP9000 DB:9201(数据文件分布在裸设备上)

1.创建一个200M的data1逻辑卷，在系统提示符下键入命令：

lvcreate -L 500 -n data1 /dev/vg00

lvcreate -L 500 -n data2 /dev/vg00

lvcreate -L 500 -n index /dev/vg00

2.赋权限

chown oracle:oinstall /dev/vg00/rdata1

chown oracle:oinstall /dev/vg00/rdata2

chown oracle:oinstall /dev/vg00/rindex

3.创建表空间

SQL> CREATE TABLESPACE rdata1

2 DATAFILE '/dev/vg00/rdata1' SIZE 400M

3 AUTOEXTEND ON NEXT 20M MAXSIZE UNLIMITED

4 LOGGING

5 DEFAULT NOCOMPRESS

6 ONLINE

7 PERMANENT

8 EXTENT MANAGEMENT LOCAL AUTOALLOCATE

9 SEGMENT SPACE MANAGEMENT AUTO

10 /


Tablespace created


SQL> CREATE TABLESPACE rdata2

2 DATAFILE '/dev/vg00/rdata2' SIZE 400M

3 AUTOEXTEND ON NEXT 20M MAXSIZE UNLIMITED

4 LOGGING

5 DEFAULT NOCOMPRESS

6 ONLINE

7 PERMANENT

8 EXTENT MANAGEMENT LOCAL AUTOALLOCATE

9 SEGMENT SPACE MANAGEMENT AUTO

10 /


Tablespace created


SQL> CREATE TABLESPACE rindex

2 DATAFILE '/dev/vg00/rindex' SIZE 400M

3 AUTOEXTEND ON NEXT 20M MAXSIZE UNLIMITED

4 LOGGING

5 DEFAULT NOCOMPRESS

6 ONLINE

7 PERMANENT

8 EXTENT MANAGEMENT LOCAL AUTOALLOCATE

9 SEGMENT SPACE MANAGEMENT AUTO

10 /


Tablespace created

4.创建表及填充数据

SQL> CREATE TABLE test

2 (

3 ID INT,

4 description VARCHAR(10)

5 )

6 PCTFREE 0

7 PARTITION BY RANGE (ID)

8 (

9 PARTITION data01 VALUES LESS THAN (1000000) tablespace rdata1,

10 PARTITION data02 VALUES LESS THAN (3000000) tablespace rdata2

11 ) nologging

12 /


Table created

SQL> alter table test add constraint pk_test primary key(id) using index local tablespace rindex;


Table altered


SQL> select * from user_tab_partitions;


TABLE_NAME COMPOSITE PARTITION_NAME

------------------------------ --------- ------------------------

TEST NO DATA01

TEST NO DATA02


SQL> select * from user_ind_partitions;


INDEX_NAME COMPOSITE PARTITION_NAME

------------------------------ --------- ------------------------

PK_TEST NO DATA01

PK_TEST NO DATA02


放2000000条数据

SQL> begin

2 for nindex in 1..2000000 loop

3 insert /*+ append */

4 into test

5 values (nindex, to_char(nindex)||'test');

6 if mod(nindex,1000) =0 then

7 commit;

8 end if;

9 end loop;

10 end;

11 /

PL/SQL procedure successfully completed

数据布布情况:

SQL> select count(*) from test partition(DATA01);

COUNT(*)

----------

999999

SQL> select count(*) from test partition(DATA02);

COUNT(*)

----------

1000001

比较均匀

SQL> alter system flush shared_pool;

System altered

SQL> select count(*) from test;

COUNT(*)

----------

2000000

已用时间: 00: 00: 01.49

Execution Plan

----------------------------------------------------------

0 SELECT STATEMENT Optimizer=CHOOSE (Cost=4 Card=1)

1 0 SORT (AGGREGATE)

2 1 PARTITION RANGE (ALL)

3 2 INDEX (FAST FULL SCAN) OF 'PK_TEST' (UNIQUE) (Cost=4 C

ard=451528)

Statistics

----------------------------------------------------------

1836 recursive calls

0 db block gets

4384 consistent gets

0 physical reads

0 redo size

488 bytes sent via SQL*Net to client

655 bytes received via SQL*Net from client

2 SQL*Net roundtrips to/from client

45 sorts (memory)

0 sorts (disk)

1 rows processed

SQL> select /*+ parallel(test,2) */ count(*) from test;

COUNT(*)

----------

2000000

已用时间: 00: 00: 01.45

Execution Plan

----------------------------------------------------------

0 SELECT STATEMENT Optimizer=CHOOSE (Cost=4 Card=1)

1 0 SORT (AGGREGATE)

2 1 PARTITION RANGE (ALL)

3 2 INDEX (FAST FULL SCAN) OF 'PK_TEST' (UNIQUE) (Cost=4 C

ard=451528)

Statistics

----------------------------------------------------------

0 recursive calls

0 db block gets

3982 consistent gets

0 physical reads

0 redo size

488 bytes sent via SQL*Net to client

655 bytes received via SQL*Net from client

2 SQL*Net roundtrips to/from client

0 sorts (memory)

0 sorts (disk)

1 rows processed

经过我反复实验，并行查询数据分布均匀的表时，逻辑读明显小于非并行查询，且并行查询不需要排序,而非并行排序43次,不

知道这一块原理是什么？

测试均匀数据分布的并行查询与非并行查询，结果是均匀数据分布的并行查询要优于非并行查询


文章分类: 技术
前篇(05-11-30): 并行cpu测试
后篇(05-12-02): 促进睡眠的饮食
最新回复(2件) 主题/内容 作者/日时
Re: 并行cpu查询分区表测试
奇怪；你的数据库版本比较高，setautotrace竟然还显示不出并行的执行计划
JServer Release 8.1.7.3.0 - Production
SQL> set autotrace on
SQL> select /*+ parallel(trade,4) full(trade) */ count(*) from trade;
COUNT(*)
----------
202618
Execution Plan
-------------------------------------------------------
0 SELECT STATEMENT Optimizer=CHOOSE (Cost=651 Card=1)
1 0 SORT (AGGREGATE)
2 1 SORT* (AGGREGATE) :Q311470 00
3 2 TABLE ACCESS* (FULL) OF 'TRADE' (Cost=651 Card=207400) :Q311470 00
2 PARALLEL_TO_SERIAL SELECT /*+ PIV_SSF */ SYS_OP_MSR(COUNT(*)) FROM (SELECT /*+ NO_EXPAND ROWID(A2)
3 PARALLEL_COMBINED_WITH_PARENT
----------------------------------
365 recursive calls
860 db block gets
10982 consistent gets
10874 physical reads
692 redo size
369 bytes sent via SQL*Net to client
426 bytes received via SQL*Net from client
2 SQL*Net roundtrips to/from client
10 sorts (memory)
0 sorts (disk)
1 rows processed
然后察看该session的v$session_event，只有很少的db file scatter read/db file sequence read. 说明setautotrace其统

计的physical reads/consistent gets并不准确，肯能包括parallel slave的统计。不过并行应该是使用db file direct read

的。
另外你能否测试一下full table scan?你的并行测试都是扫描的表空间rindex上的索引。数据物理上并没有“share nothing”

的分布。
玉面飞龙
05-12-02 10:54
Re: 并行cpu查询分区表测试
SQL> alter system flush shared_pool;

系统已更改。

已用时间: 00: 00: 00.05
SQL> select /*+full(test) */ count(*) from test;

COUNT(*)
----------
2000000

已用时间: 00: 00: 02.01

Execution Plan
----------------------------------------------------------
0 SELECT STATEMENT Optimizer=CHOOSE (Cost=533 Card=1)
1 0 SORT (AGGREGATE)
2 1 PARTITION RANGE (ALL)
3 2 TABLE ACCESS (FULL) OF 'TEST' (Cost=533 Card=451528)

Statistics
----------------------------------------------------------
2039 recursive calls
0 db block gets
5979 consistent gets
2737 physical reads
0 redo size
206 bytes sent via SQL*Net to client
275 bytes received via SQL*Net from client
4 SQL*Net roundtrips to/from client
49 sorts (memory)
0 sorts (disk)
1 rows processed

SQL> select /*+full(test) parallel(test,2) */ count(*)from test;

COUNT(*)
----------
2000000

已用时间: 00: 00: 03.00

Execution Plan
----------------------------------------------------------
0 SELECT STATEMENT Optimizer=CHOOSE (Cost=267 Card=1)
1 0 SORT (AGGREGATE)
2 1 SORT* (AGGREGATE) :Q26000
3 2 PARTITION RANGE* (ALL) :Q26000
4 3 TABLE ACCESS* (FULL) OF 'TEST' (Cost=267 Card=451528 :Q26000
)

2 PARALLEL_TO_SERIAL SELECT /*+ PIV_SSF */ SYS_OP_MSR(COUNT(*)) F
ROM (SELECT /*+ NO_EXPAND ROWID(A2)

3 PARALLEL_COMBINED_WITH_PARENT
4 PARALLEL_COMBINED_WITH_PARENT

Statistics
----------------------------------------------------------
549 recursive calls
3 db block gets
5692 consistent gets
5529 physical reads
920 redo size
205 bytes sent via SQL*Net to client
275 bytes received via SQL*Net from client
4 SQL*Net roundtrips to/from client
10 sorts (memory)
0 sorts (disk)
1 rows processed

奇怪当按照全表扫描时，并行没有显示出优势,物理读比非并行多。
且上次的并行提示没有显示并行的信息，是因为走的是索引扫描。
SQL> select distinct sid from v$mystat;

SID
----------
12

已用时间: 00: 00: 00.03

Execution Plan
----------------------------------------------------------
ERROR:
ORA-01039: 视图基本对象的权限不足

SP2-0612: 生成AUTOTRACE EXPLAIN报告时出错

Statistics
----------------------------------------------------------
434 recursive calls
0 db block gets
82 consistent gets
0 physical reads
0 redo size
201 bytes sent via SQL*Net to client
275 bytes received via SQL*Net from client
4 SQL*Net roundtrips to/from client
16 sorts (memory)
0 sorts (disk)
1 rows processed

SQL> select sid,event from v$session_event where sid=12;

SID EVENT
---------- ----------------------------------------------------------------
12 db file sequential read
12 SQL*Net message to client
12 SQL*Net more data to client
12 SQL*Net message from client

已用时间: 00: 00: 00.03

Execution Plan
----------------------------------------------------------
ERROR:
ORA-01039: 视图基本对象的权限不足

SP2-0612: 生成AUTOTRACE EXPLAIN报告时出错

Statistics
----------------------------------------------------------
286 recursive calls
0 db block gets
58 consistent gets
0 physical reads
0 redo size
359 bytes sent via SQL*Net to client
275 bytes received via SQL*Net from client
4 SQL*Net roundtrips to/from client
12 sorts (memory)
0 sorts (disk)
4 rows processed

开心就好
05-12-02 12:56

来自 “ ITPUB博客 ” ，链接：http://blog.itpub.net/8806316/viewspace-913294/，如需转载，请注明出处，否则将追究法律责任。

转载于:http://blog.itpub.net/8806316/viewspace-913294/

congqingshi6182
关注
oracle并行创建表,oracle并行度调整
weixin_35273106的博客
04-03 803
oracle并行度使用多个cpu与io来执行数据库操作，能够显著改善大型数据库操作性能，比如DSS或数据仓库 适用于 大表查询，join,分区索引的查询 创建大量的index 创建大量的表(包括固化视图) 批量的insert,update,delete 查行执行适合场景 对称多处理器，集群oracle并行度使用多个cpu与io来执行数据库操作，能够显著改善大型数据库操作性能，比如DSS或数据仓库适...
oracle中设置数据表并行dml,ORACLE并行操作学习
weixin_42387482的博客
04-05 1576
1 并向操作对于一个大的任务，一般的做法是利用一个进程，串行的执行，如果系统资源足够，可以采用parallel技术，把一个大的任务分成若干个小的任务，同时启用n个进程/线程，并行的处理这些小的任务，这些并发的进程称为并行执行服务器(parallel executeion server)，这些并发进程由一个称为并发协调进程的进程来管理，可以让多个CPU同时处理一个计算任务，充分使用系统资源，提高...
Oracle性能误区--MTS,RAC,分区,并行查询
weixin_30505751的博客
04-06 116
为了提高性能,我们针对Oracle数据库本身提供了的方法或方案进行过不少的偿试主要包括:共享服务器模式(MTS)集群技术(Clustering),RAC 分区并行处理(主要是并行查询) Oracle提供的这些特性确实是用来进行性能改善的,但我们往往忽略了对自身应用特性的分析,它们是否适合于我们.最近,通过对这方面知识的深入了解,发现我们以前存在一些错误的认识.我觉得有必要,大家一起来改变这种误...
oracle分区表并行查询,Oracle性能误区--MTS,RAC,分区,并行查询
weixin_42348783的博客
04-09 617
为了提高性能,我们针对Oracle数据库本身提供了的方法或方案进行过不少的偿试主要包括:共享服务器模式(MTS)集群技术(Clustering),RAC分区并行处理(主要是并行查询)Oracle提供的这些特性确实是用来进行性能改善的,但我们往往忽略了对自身应用特性的分析,它们是否适合于我们.最近,通过对这方面知识的深入了解,发现我们以前存在一些错误的认识.我觉得有必要,大家一起来改变这种误解.分析...
2013.11.22并行查询 分区表
haiross的专栏
11-28 1034
谷歌     并行查询 分区表 http://f.dataguru.cn/thread-46946-1-1.html http://f.dataguru.cn/thread-46694-1-1.html http://tech.techweb.com.cn/archiver/tid-459066.html 谷歌 分布式查询 http://baike.baidu.com/view/46
oracle 并行创建分区表同时自增分区并行查询
weixin_44258894的博客
06-18 407
CREATE TABLE aaaa PARTITION BY RANGE(C_ID) interval (1000000000000) store in (DAT_TS) ( PARTITION p_contract_id VALUES LESS THAN (1512191000000000000) tablespace DAT_TS) parallel(DEGREE 12) AS SELECT /*+ PARALLEL(12)*/ CONT_ID, LAST_U...
oracle分区表测试
nj198624的专栏
11-08 525
先建三个表空间 create tablespace dinya_space01 datafile 'E:\dinya01.dnf' size 50M autoallocate; create tablespace dinya_space02 datafile 'E:\dinya02.dnf' size 50M autoallocate; create tablesp
用Oracle并行查询发挥多CPU的威力
03-04
Oracle并行查询（OPQ）是Oracle数据库系统中一项强大的特性，它利用现代硬件的多处理器能力，显著提升大规模数据操作的效率。随着硬件的进步，尤其是对称多处理（SMP）服务器的普及，Oracle从Oracle8i版本开始在各个...
用Oracle并行查询发挥多CPU的威力定义.pdf
11-15
Oracle并行查询（OPQ）是Oracle数据库系统中一种强大的特性，旨在利用多CPU系统的能力，提高查询性能和响应时间。随着硬件的发展，服务器经常配备8个、16个甚至32个CPU，Oracle数据库也相应地实现了并行性功能。自...
oracle并行parallel update两张表_ORACLE 并行(PARALLEL)实现方式及优先级
weixin_30978387的博客
01-14 1105
http://blog.itpub.net/25542870/viewspace-2120924/一、Parallel query默认情况下session是ENABLE状态1.实现方式1 Alter session force parallel query;2 Alter table tab1 parallel n;3 Hist方式2.并行度设置Alter...
Oracle（表分区,执行计划与扫描方式）12.23
weixin_45392911的博客
12-24 788
分区 Oracle的表分区功能 通过改善可管理性、性能、和可用性，从而为个事应用程序带来了极大的好处。通常，分区可以使某些查询以及维护操作的性能大大提高。此外，分区还可以极大简化常见的管理任务，分区使构建千兆字节数据系统或超高可用性系统的关键工具。分区功能能够将表、索引或索引组织表进一步细分为段，这些数据库对象的段叫做分区。每个分区有自己的名称，还可以选择自己的存储特性。从数据库管理员的角度来看，...
子分区如何用并行oracle,Oracle 数据库12c 16大新特点总结
weixin_34260787的博客
04-13 196
Oracle 数据库12c 16大新特性总结Oracle 12c 已发布很久，一直想找个时间好好学习一下，毕竟后续12c将会逐渐替代现有数据库版本，成为主流数据库版本。现就12c 一些常用的特性给大家一起学习一下。1. 在线重命名和重新定位活跃数据文件不同于以往的版本，在Oracle数据库12c R1版本中对数据文件的迁移或重命名不再需要太多繁琐的步骤，即把表空间置为只读模式，接下来是对数据文件进...
Oracle 并行查询 parallel Query
海鲨MYSQL精英架构师
06-26 1万+
81    53,5297 P_Base_Day_I_NewTaredUser 2009-06-25 17:28:56 2009-06-25 18:24:21 55 insert 成功 base82    53,5300 P_BASE_DAY_I_NEWTAREDUSER_test 2009-06-25 17:29:31 2009-06-25 17:54:21 24 insert 成功 base
分区表的查询
weixin_33922670的博客
05-17 222
　　前一篇文章提到了在2014下分区表引起的奇葩问题，最近也在苦苦研究问题的原因。这篇文章主要讲述在分区表下，查询是怎么样的一个情况。由于2014的新功能“参数估计”下是如何运转的目前无从得知，所以只能分享下2008下的原理了... 　　在 SQL Server 2008 中，已分区表的内部表示形式已发生变化，即已分区表将作为一个多列索引呈现给查询处理器，其中PartitionID是第一列。P...
oracle分区表的使用和查询
热门推荐
mzglzzc的专栏
06-01 4万+
一  创建和使用分区表 范围分区、散列分区、列表分区、复合分区 二 有关分区表的维护操作 添加、删除、截断、合并、拆分、接合、重命名、交换、移动、索引 三 相关查询
oracle查分区表的一些注意事项
weixin_33770878的博客
04-08 443
     昨天有个同事找我看了一段SQL，说是很慢，我首先看了看执行计划，发现COST很大，但是同时我也发现分区读取的有很大的问题。表示这样的：       create table test1 ( day_id number ) partition by range(day_id) ( partition part_0 values less than(20130...
Oracle分区表
weixin_30809173的博客
11-28 1076
先说句题外话… 欢迎成都天府软件园的小伙伴来面基交流经验~ 一：什么是分区（Partition）？ 分区是将一个表或索引物理地分解为多个更小、更可管理的部分。 分区对应用透明，即对访问数据库的应用而言，逻辑上讲只有一个表或一个索引（相当于应用“看到”的只是一个表或索引），但在物理上这个表或索引可能由数十个物理分区组成。 每个分区都是一个独立的对象，可以独自处理，也可以作为一个更大...
Oracle SQL进阶技巧：并行查询、分区操作与函数使用
例如，`select /*+parallel(a,4)*/`和`insert /*+parallel(t,4)*/`语句的使用，其中`4`通常表示并行使用的CPU核心数。 2. **删除表分区（Partitioned Table Data Deletion）**： 在处理大型表的分区时，可以使用`...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值