oracle多大数据量适合建分区表,亿级数据量的分区表查询效率问题

最新推荐文章于 2021-04-30 14:43:52 发布

傻宁Fighting

最新推荐文章于 2021-04-30 14:43:52 发布

阅读量1.5k

点赞数

文章标签： oracle多大数据量适合建分区表

该博客讨论了一个拥有1.2亿记录的Oracle分区表，每天150万条数据，存在实时插入。由于查询列不在索引中，导致分页查询性能下降。问题主要集中在带有特定条件的分页查询上，存在db file scattered read等待事件。目前索引限制了查询优化。寻求提高查询速度的解决方案。

摘要由CSDN通过智能技术生成

表结构以及索引如下：

create table test

(

ID INTEGER not null, --id是主键

IS_DELETED NUMBER(1) not null,

CREATOR VARCHAR2(255),

MODIFIOR VARCHAR2(255),

PLATENUMBER VARCHAR2(15),

PLATETYPE VARCHAR2(16),

LANENAME VARCHAR2(40),

PLATECOLOR VARCHAR2(16),

SPEED INTEGER,

PASSTIME DATE,

PICTYPE INTEGER,

FIRSTPICPATH VARCHAR2(128),

SECONDPICPATH VARCHAR2(128),

PLATERECTTOP INTEGER,

PLATERECTLEFT INTEGER,

PLATERECTWIDTH INTEGER,

PLATERECTHEIGHT INTEGER,

SELPICNO NUMBER(6),

STATUS NUMBER(6),

DIRECTION VARCHAR2(32),

PASSPORTNAME VARCHAR2(64),

DATENUMBER NUMBER(14) not null,-

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

傻宁Fighting

关注关注

0
点赞
踩
1

收藏

觉得还不错? 一键收藏
0
评论
oracle多大数据量适合建分区表,亿级数据量的分区表查询效率问题

表结构以及索引如下：create table test(ID INTEGER not null, --id是主键IS_DELETED NUMBER(1) not null,CREATOR VARCHAR2(255),MODIFIOR VARCHAR2(255),PLATENUMBER VARCH...
复制链接

扫一扫

oracle表分区粒度多少合适,oracle大表分区的一点点心得

weixin_36059638的博客

04-04

628

http://www.knowsky.com/388420.html最近在做一个客户关系治理系统，项目做的到不是非常成功，可还是学到了不少的知识，由于数据量很大，没有专门的Oracle数据库人员支持，对数据库优化治理等也只有我这个约懂一点的人上了。在对数据库优化上有一点点心得写出来希望能同大家一起学习和交流。数据库大表的优化：采用蔟表(clustered tables)及蔟索引(Clustered...

oracle分区技术-针对大数据量表

10-25

分区技术讲解，非常详细，有sql。非常详细的文档。

参与评论您还未登录，请先登录后发表或查看评论

Oracle表分区

07-02

2380

一、概述： 1、分区：将表数据划分成更小的子集。经验：在一个表的数据超过2000万条或占用2G 空间时，建议建立分区表。 2、好处： 1）提高可用性。如100GB 的表，如果划分成2G 的50 个分区，只要查询的数据所处的分区online，而其他的分区可以是offline，数据库依然工作正常。 2）减轻管理负担。对分区数据的维护，比如删除、更新、分析、数据恢复等，可以以分区

SpringBoot 2.x ShardingSphere分库分表实战

HollisChuang's Blog

05-29

2444

本文转载自微信公众号：李浩东的博客一. 项目需求在之前我做项目的时候，数据量比较大,单表千万级别的,需要分库分表，于是在网上搜索这方面的开源框架,最常见的就是mycat,...

特殊需求：oracle单表插入两亿条数据

qq_18937429的博客

04-02

2858

业务场景：现在有个需求，模拟大数据量下系统的抗压能力，需要在表C构造两亿条数据。虽然官方建议单表两千万条数据最好，但是想看下系统在不借助其他中间件的情况下，直接进行表操作是否可行。已有逻辑结构在批量插入非常慢，批量插入5万条数据需要5H左右（因为还有其他链接表，）。数据场景：表A为主表，表示一个对象，表C是表A的一个属性表。例如表A有一条数据‘TEST001’，该数据有长、宽、高、温度、湿度五个属性，那么在表C中，就有5条数据。 ...

oracle 单表查询数据,Oracle数据库之单表查询

weixin_42367522的博客

04-07

378

接着上一篇的分享，今天主要给大家分享的是关于数据中的单表查询，单表查询很基础，也很重要，但是任何一个初学者必须要掌握的姿势，单表查询就是对单个表进行操作，查询我们想要的数据。单表查询里面的内容也是比较多的，比如单表查询结合比较运算符、逻辑运算符、以及in not in 、between...and、模糊查找、排序查找、去重查找、空值的处理、any以及all的使用。接下来就看一下关于单表查询的使用吧...

oracle分区技术-大批量数据操作PPT课件.ppt

11-24

Oracle 分区技术是 Oracle 数据库中的一种高级技术，用于解决大批量数据操作问题。该技术可以将大型表或索引分割成小的、独立的物理段，以提高数据的管理和查询效率。分区技术的优点包括： * 提高查询性能：因为...

Oracle 数据表分区的策略

09-11

Oracle 数据表分区是一种高效的数据管理策略，尤其适用于处理大规模数据的数据库系统。Oracle数据库支持多种分区策略，以优化查询性能，提高数据维护的效率，并且能够简化数据管理和备份过程。以下将详细介绍如何...

Oracle 统计用户下表的数据量实现脚本

09-09

最后，总结脚本的主要作用是提供了一种自动化的方法来统计Oracle数据库中指定用户下的所有表的数据量，包括分区表。这种脚本对于数据库管理员来说非常有用，因为它可以定期运行，帮助监控和分析数据库的使用情况。...

Oracle查询表里的重复数据方法

12-16

在Oracle数据库中，查询和处理重复数据是一项常见的任务，尤其在数据清洗和数据整合的过程中显得尤为重要。本篇文章将详细介绍如何在Oracle中查询...同时，对大规模数据的操作，考虑使用临时表或分区等策略来优化性能。

oracle表分区三千万数据一分半插入，喜极而泣

kylin5221的博客

04-30

403

前言：一张表三千万数据，每次都要关联这张表，如何优化？我这里采用表分区方法创建分区表 CREATE TABLE PART( key_id NUMBER(30) not null, part_num varchar2(2) not null ) PARTITION BY LIST (part_num) ( PARTITION PART_1 VALUES ('1'), PARTITION PART_2 VALUES ('2'), PARTI

oracle 分区最多多少个,oracle3个过亿的父子大表如何分区

weixin_35952362的博客

04-04

499

1、父子表的分区，可以考虑使用引用分区。引用分区表是Oracle11g引入的新特性，解决了“并非所有子表都具有父表的分区列”这个问题。采用引用分区，子表会继承父表的分区机制。是通过PARTITION BY REFERENCE语句来实现，需要指定引用约束的名称，该约束将成为应用到该引用分区表所使用的约束。这个约束必须启用和执行。引用分区可以实现父表的分区删除时，子表自动实现同步删除的动作。子表无需具...

解决海量数据问题：分区表

一只老风铃

12-02

329

分区表 分区指的是将一个表或者索引分解为多个更小、更加容易管理的部分。从访问数据库的应用角度上看，它们只有一个逻辑表示，但在物理上表的记录可能划分为多个模块，也就是所谓的分区。 Mysql支持水平分区，即将同一个表的不同行的记录划分到不同的物理文件中，暂时不支持垂直分区（将同一张表的记录按照列划分到不同的物理文件中）。而每一个分区中既存放着索引也存放着数据。 Mysql支持的分区类型： Range分区：行数据基于一个给定连续区间的列的值，划分到不同分区。 List分区：List分区与Range的

oracle单表数据性能,ORACLE和新数据的性能提升（通过中间表）

weixin_31077513的博客

04-06

240

--更新历程权力值--1.查询效率慢的update FW_WF_COURSE c set c.power =(select distinct from jbpm_taskinstance t1 where t1.id_ = c.task_id)where c.power is null;--查询效率快create table FW_WF_COU_BP asselect * from (select...

oracle联合主键效率,Oracle主键与复合主键的性能分析

weixin_32365777的博客

04-03

1248

总结：1、主键和复合主键，查询性能相同(索引高度相同，恰当的运用索引)。2、主键和复合主键，(update,insert)性能不同(因为复合主键会用更多的块来创建索引，所以update,insert性能低)实验思路：1、建立实验表，及主键，联合2个主键，联合3个主键2、查看索引的结构3、查看条件相同的，执行计划(来确定主键和复合主键的效率)一、建立实验表；test1为单主键为1个column，...

ORACLE中大数据量下索引效率的测试与分析

weixin_30902675的博客

11-02

345

摘要：通过模拟海量数据的产生，生成测试数据并进行数据查询、插入，对索引的效率进行分析，给出了Oracle数据库中大数据量下如何合理使用全局索引与分区索引的建议。　　关键词：大数据量；索引；效率；分区　　　　0　引言　　　　一些大的应用系统如医保、移动、银行等行业的应用系统，出于节约管理成本、提高数据共享度等方面的考虑，业务数据一般以省为单位集中，数据库中存放的数据量很大(一般为T级)，而...

oracle表空间最大30G？如果一张表超过30G怎么办

秃了也弱了

06-15

8364

引出问题开发程序的时候，客户跟我说，他们有一张表，铺底数据有100多G，日增长量2个G。我？？？？我陷入了沉思。首先，这是一个小系统，可以说数据库、应用都是单机。数据没法分割，也没法做到分库分表。于是乎，我创建了一个表空间，数据导入一半跟我说，单个表空间DBF文件最大就是30G！解决问题怎么办？扩容表空间呗。搜了很多资料，经测试以下语句可以扩容表空间： ALTER TABLESPACE space_name ADD DATAFILE '/xxx/xx/DATA02.DBF' SI

oracle 单表记录上限,ORACLE单表理论最大记录数

weixin_36275605的博客

04-05

6010

不考虑硬件诸如内存，存储等硬件的限制。一张表理论能存储多少条记录呢？假设：一个tablespace中包含1022个datafiles，单个datafiles的最大是32G假设每个block是16k，每个block中有160条记录，每个表可以有(1024*1024)-1个分区表那么一张表理论最大存储记录数约为：1.一个表空间tablespace的最大值：datafile个数 × 单个datafile...

oracle多大数据量适合建分区表