千万级数据，如何做性能优化？分库分表、Oracle分区表？

最新推荐文章于 2023-09-28 17:55:43 发布
最新推荐文章于 2023-09-28 17:55:43 发布
阅读量5.6k 收藏 89
点赞数 56
分类专栏： 数据库基础教程系列 文章标签： oracle 数据库 大数据
本文为博主原创文章，未经博主允许不得转载。
本文链接：https://blog.csdn.net/guorui_java/article/details/128796140
版权
本文深入探讨Oracle的存储结构，解析Oracle分区表技术，包括范围分区、列表分区、哈希分区及其组合形式，详述何时进行分区以及分区的优缺点。通过实例讲解如何创建、管理分区，帮助读者快速掌握Oracle分区表，提升大数据场景下的数据库性能。
摘要由CSDN通过智能技术生成

在这里插入图片描述

目录

大家好，我是哪吒，最近项目有一个新的需求，按月建表，按天分区。

不都是分库分表吗？怎么又来个分区？

让我们一起，一探究竟，深入理解一下Oracle分区表技术，实现快速入门，丰富个人简历，提高面试level，给自己增加一点谈资，秒变面试小达人，BAT不是梦。

三分钟你将学会：

  1. Oracle是如何存储数据的？
  2. Oracle分区是什么？
  3. 何时分区？
  4. 分区表的分类都有哪些？
  5. Oracle分区技术实战演练

一、Oracle是如何存储数据的？

1、逻辑存储与物理存储

在国企或者一线大厂，一般都会选择使用Oracle数据库，程序通过mybatis等持久层框架访问Oracle数据库，指定表空间，表空间内包含若干张表，表中存有行数据，行数据

了解本专栏 订阅专栏 解锁全文
哪 吒
关注
专栏目录
订阅专栏
oracle 分库分表（sharding）
Davin_（幸福在于感悟）..........
10-19 6473
以下文章转载博客：http://blog.csdn.net/bluishglc 讲的很深入透彻，转来分享下：   数据库Sharding的基本思想和切分策 http://blog.csdn.net/bluishglc/article/details/6161475 关于垂直切分Vertical Sharding的粒度 http://blog.csdn.net/bluishglc/arti
百亿数据分库分表核心流程详解
m0_73311735的博客
09-29 950
此时可能就需要我们去对数据库进行优化，业务初期我们可能会使用增加索引、优化索引、读写分离、增加从库等手段来进行优化，但是随着数据量的不断增大，这些优化手段的效果会变得越来越小，此时可能就需要使用分库分表来进行优化，对数据进行切分，将单库和单表的数据量控制在合理的范围内，以保证数据库可以提供高效的读写能力。因为单台MySQL服务器的硬件资源是有限的，随着业务的不断发展，请求量和数据量会不断增加，数据库的压力会越来越大，到了某一时刻，数据库的读写性能可能会开始下降，这个时候数据库就成为请求链路中的瓶颈。
千万级并发架构下，关系型数据库应该如何优化？大厂是如何做分库分表的！...
跟着Mic学架构
10-23 316
随着互联网的高速发展，带来了海...
ORACLE 千万条的数据优化
weixin_40598838的博客
12-15 2933
概述 需要是这样的，在一张有一千万条数据的表里，时间类型为yyyy-MM-dd HH:mm:ss，需要按月或者年对数据进行统计，功能写出来后查询了一下数据发现太慢了，，结合一个案例简单讲一下，架构用的是Mybatis Plus demo 开始的返回数据是这样的，但是它的时间达到了3秒，有时候到8秒，这也太慢了 想到了再Mybatis Plus中注入数据的时候，可能要对很多无关的字段进行检测，那么是否可以把无关字段去掉一下？ 尝试一下 可以，时间为1秒，没有问题，期间有尝试过用在时间字段上加索引，但是时间
业务单表 读写缓慢 如何优化？
m0_71777195的博客
10-20 293
在前面的文章中探讨了架构优化的两种方案：冷热分离、查询分离查询分离其实就是利用了非关系数据库的高性能，但是不足之处也很明显：当主数据量越来越多，写操作缓慢；这种问题如何破局？可见任何一种优化方案都不是最终的银弹，只有不断的优化演变这篇文章就来介绍一下解决方案：分库分表，将围绕以下几点介绍：拆分后的存储选型？分库分表的实现思路？分库分表的不足？
Oracle 千万级表的优化思路
最新发布
weixin_63021300的博客
09-28 588
5.压缩：压缩表、索引，减少存储空间的使用，也能提高I/O性能。3.视图：用来放经常查询的结果，还可以减少服务器计算的开销。7.数据库参数配置：SGA/PGA、日志、缓存都卡大表的脖子。1.表分区：减少查询的数据量，从而减少I/O操作。4.并行处理：加快查询速度，受制于CPU。2.适当的索引：查询频率、索引数量。8.升级硬件：增加内存，用更好的磁盘。
怎样玩转千万级别的数据
巴萨，足球的艺术
09-10 988
大数据处理是一个头疼的问题，特别当达不到专业DBA的技术水准时，对一些数据库方面的问题感到无赖。所以还是有必要了解一些数据库方面的技巧，当然，每个人都有自己的数据库方面的技巧，只是八仙过海，所用的武功不同而已。我把我最常用的几种方式总结来与大家分享，大家还有更多的数据库设计和优化的技巧，尽量的追加到评论中，有时一篇完整的博客评论比主题更为精彩。 方法1：采用表分区技术。  　　第一次听说表分区
MySQL数据库之分库分表方案
weixin_71682097的博客
06-10 2773
MySQL数据库之分库分表方案
【海量数据下分库分表最优方案】
heima201907的博客
12-10 742
移动互联网时代，海量的用户每天产生海量的数量，比如： 用户表 订单表 交易流水表 以支付宝用户为例，8亿；微信用户更是10亿。订单表更夸张，比如美团外卖，每天都是几千万的订单。淘宝的历史订单总量应该百亿，甚至千亿级别，这些海量数据远不是一张表能Hold住的。事实上MySQL单表可以存储10亿级数据，只是这时候性能比较差，业界公认MySQL单表容量在1KW以下是最佳状态，因为这时...
数据库SQL优化大总结之 百万级数据库优化方案
09-04
数据库SQL优化大总结之 百万级数据库优化方案,网上关于SQL优化的教程很多，但是比较杂乱。近日有空整理了一下，写出来跟大家分享一 下，其中有错误和不足的地方，还请大家纠正补充。 这篇文章我花费了大量的时间查找资料、修改、排版，希望大家阅读之后，感觉好的话推荐 给更多的人，让更多的人看到、纠正以及补充。
Oracle分库分表分区学习日志.docx
08-22
对于Oracle自己的一点学习笔记记录。主要是对于Oracle分表分库分区的学习和理解
oracle千万级别数据简单操作
10-10
oracle千万级别数据简单操作
oracle千万级数据优化,Oracle千万级数据分页查询优化
weixin_29351901的博客
04-03 1456
未优化之前：SELECT TMP.* FROM (SELECT ROWNUM AS "ROWNO",${tableId},${columnName}FROM ${tableName}) TMPWHERETMP.ROWNO <= #{end}AND TMP.ROWNO >= #{start}优化之后：SELECT T1.${tableId},T1.${columnName}FROM ${...
SQL数据库不用SQL语句能显示全表的内容_MySQL百万级数据库优化方案
weixin_39955938的博客
11-16 363
一、百万级数据库优化方案1.对查询进行优化，要尽量避免全表扫描，首先应考虑在 where 及 order by 涉及的列上建立索引。2.应尽量避免在 where 子句中对字段进行 null 值判断，否则将导致引擎放弃使用索引而进行全表扫描，如：select id from t where num is null最好不要给数据库留NULL，尽可能的使用 NOT NULL填充数据库.备注、描述、评论之...
oracle in 优化_一文看懂Oracle数据库Flashback Archive定义、特性与常用脚本
weixin_39834084的博客
12-22 221
概述Flashback archive是Oracle 11g中推出的新历史数据查询新特性。对比过去的flashback query，flashback archive具有更强的时间准确和对象针对性。一、Flashback Archive组件和FBDA进程Flashback Archive特性是Oracle 11g中新推出的。每个新特性的推出，大都伴随着Oracle体系结构的不断丰富和调整。Orac...
oracle10 千万级数据存取优化
新博客地址：www.threeperson.com
02-27 712
[list] 今天对一个存有1000万数据的大表进行了优化，尽是简单的优化，效果很明显。下面把自己的优化经过简单总结备忘一下。 1:创建表的备份，把生产表的querySql copy后修改table 为temp_tbl 2:从原有表中copy 数据插入到temp_tbl中语句如下 insert into temp_tbl select * f...
oracle千万级数据优化,Oracle优化：千万级大表逻辑判断的累赘
weixin_42395219的博客
04-03 343
insertinto pntmall_point_detail(PNTMALL_PNT_ID,PNTMALL_PNT_DT,PNTMALL_VALIDITY,PNTMALL_LASTUPDATEDT,PNTMALL_RPTPNT_ID,PNTMALL_HAIERUID,PNTMALL_OPTYPE_ID,PNTMALL_OPTYPE_DESC,PNTMALL_NUM,PNTMALL_EXPDT,H...
oracle分库分表
专注Java（全栈）应用开发，求知若渴，虚心若愚，talk is cheap, show me the code.
06-21 3872
oracle 如何进行分库分表呢？1.引入POM 2. yaml 配置 3. DDL 4. 准备测试对象 5. 测试 2.yaml 配置 sharding: jdbc: datasource: names: ds0 # 数据源ds0 ds0: type: com.alibaba.druid.pool.DruidDataSource driver-class-name: oracle.jdbc.driver.OracleDriver url: jdbc:oracle:thin:@localhost:1521:
评论 44
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

哪 吒

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值