db2表分区

最新推荐文章于 2023-10-16 00:08:59 发布
最新推荐文章于 2023-10-16 00:08:59 发布
阅读量1.6w 收藏 18
点赞数 2
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lushuaiyin/article/details/31782937
版权


为了提高查询效率，需要对一张大数据的表做表分区。

我直接把分区的东西贴出来吧。不细说了。


1，建表或者重建表。

/*
这个分区的sql实际过程是先将表导出，然后删掉重建，然后导入原来数据的过程。
这个sql也可以分成3部分执行。

注意事项;

1:导出文件路径和名称要根据实际情况修改，不要出现中文！
2：因为该表的主键生成策略是自增长，所以在打入数据后再
修改id生成方式（看sql），这里要注意id的起始值必须大于原来
最大值（因为是自增长，防止id重复）。要在执行sql前把这个值
查出来，修改本sql文件，RESTART WITH （比原来最大值要大）;
select  max(id) from TB_xxxxxx_TELRECORD_PARTTEST ;


*/






SET SCHEMA = 'xxxxxx';
/*
EXPORT TO
  'D:\xxxxxx_TB_xxxxxx_TELRECORD_PARTTEST1268430815.ixf'
  OF IXF 
  SELECT * FROM "xxxxxx"."TB_xxxxxx_TELRECORD_PARTTEST";

DROP TABLE "xxxxxx"."TB_xxxxxx_TELRECORD_PARTTEST";
*/
CREATE TABLE "xxxxxx"."TB_xxxxxx_TELRECORD_PARTTEST" (
  "ID"	INTEGER	NOT NULL,
  "CALLID"	VARCHAR(20)
  "CUSTNAME"	VARCHAR(40),
  "STARTTIME"	VARCHAR(19)


) 
  IN "USERSPACE2"
  LONG IN "USERSPACE2"
  PARTITION BY RANGE ( "ID" NULLS LAST ) (
      PARTITION part01 STARTING MINVALUE INCLUSIVE  ENDING 2000000 INCLUSIVE,
      PARTITION part02 STARTING  2000001 INCLUSIVE  ENDING 4000000 INCLUSIVE,
      PARTITION part03 STARTING  4000001 INCLUSIVE  ENDING 6000000 INCLUSIVE,
      PARTITION part04 STARTING  6000001 INCLUSIVE  ENDING 8000000 INCLUSIVE,
      PARTITION part05 STARTING  8000001 INCLUSIVE  ENDING 10000000 INCLUSIVE,
      PARTITION part06 STARTING  10000001 INCLUSIVE  ENDING 12000000 INCLUSIVE,
      PARTITION part07 STARTING  12000001 INCLUSIVE  ENDING 14000000 INCLUSIVE,
      PARTITION part08 STARTING  14000001 INCLUSIVE  ENDING 16000000 INCLUSIVE,
      PARTITION part09 STARTING  16000001 INCLUSIVE  ENDING MAXVALUE INCLUSIVE)
  DISTRIBUTE BY HASH ( "ID" );

ALTER TABLE "xxxxxx"."TB_xxxxxx_TELRECORD_PARTTEST"
  DATA CAPTURE NONE
  LOCKSIZE ROW
  APPEND OFF
  NOT VOLATILE;

GRANT CONTROL ON TABLE "xxxxxx"."TB_xxxxxx_TELRECORD_PARTTEST" TO USER "xxxxxx";

GRANT SELECT, INSERT, UPDATE, ALTER, DELETE,
    INDEX, REFERENCES ON TABLE "xxxxxx"."TB_xxxxxx_TELRECORD_PARTTEST" TO USER "xxxxxx" WITH GRANT OPTION;

COMMIT;


/*
IMPORT FROM 
  'D:\xxxxxx_TB_xxxxxx_TELRECORD_PARTTEST1268430815.ixf'
 OF IXF 
  MODIFIED BY COMPOUND=5
  NOCHECKLENGTHS
  COMMITCOUNT 1000
  INSERT INTO "xxxxxx"."TB_xxxxxx_TELRECORD_PARTTEST"
 (
  "ID",
  "CALLID",
  "STARTTIME",
  "ENDTIME"

  );

ALTER TABLE "xxxxxx"."TB_xxxxxx_TELRECORD_PARTTEST"
  ALTER "ID" SET 	GENERATED BY DEFAULT
    AS IDENTITY (START WITH 1, INCREMENT BY 1, CACHE 20,
       NO MINVALUE, NO MAXVALUE, NO CYCLE, NO ORDER);

ALTER TABLE "xxxxxx"."TB_xxxxxx_TELRECORD_PARTTEST"
  ALTER COLUMN "ID" RESTART WITH 6528646;

RUNSTATS ON TABLE "xxxxxx"."TB_xxxxxx_TELRECORD_PARTTEST"
  ALLOW WRITE ACCESS;

COMMIT;
*/

注意，还有把字符类型的字段作为分区键的，我也是用这个的。 

/*

说明：
1，字符串的分区键在定义时一定要写成字符串类型，并且字符串的范围是按照
字符串比较而定的，和整数的范围比较是不一样的。例如1到10.那么2肯定在这个
区间。但是如果是字符串'1'到'10'，那么'2'就不在这个范围。
所以日期（字符串类型）的定义如下(将2010年定义成一个分区)：
PARTITION PART01 STARTING '2010-01-01 00:00:00' INCLUSIVE  ENDING '2010-12-31 59:59:59' INCLUSIVE
2，分区区间在第1个和最后一个一定要把范围无限扩大，这样才能保证所有值都能插入。
因为如果一条记录分区键的值不在表定义的分区区间，那么就会报错！

所以第1条，可以这样定义：
PARTITION PART01 STARTING '1000-01-01 00:00:00' INCLUSIVE  ENDING '2010-12-31 59:59:59' INCLUSIVE
最后1条可以这样定义：
PARTITION PART02 STARTING '2012-01-01 00:00:00' INCLUSIVE  ENDING '9999-12-31 59:59:59' INCLUSIVE

这样保证分区键的值是覆盖所有情况的。这不会影响分区效果，因为分区时根据插入数据值得实际值来决定
存在哪个分区的。
当然整数类型就更好解决了。
使用MINVALUE,MAXVALUE。


*/


SET SCHEMA = 'xxxxxx';

---DROP TABLE "xxxxxx"."TB_xxxxxx_TELRECORD_PARTTEST3";

CREATE TABLE "xxxxxx"."TB_xxxxxx_TELRECORD_PARTTEST3" (
  "ID"	INTEGER	NOT NULL	GENERATED BY DEFAULT
    AS IDENTITY (START WITH 1, INCREMENT BY 1, CACHE 20,
       NO MINVALUE, NO MAXVALUE, NO CYCLE, NO ORDER),
  "CALLID"	VARCHAR(20),
  "STARTTIME"	VARCHAR(19),
  "ENDTIME"	VARCHAR(19)
) 
  IN "USERSPACE2"
  PARTITION BY RANGE ( "STARTTIME" NULLS LAST ) (
      PARTITION PART01 STARTING '1000-01-01 00:00:00' INCLUSIVE  ENDING '2010-12-31 59:59:59' INCLUSIVE,
      PARTITION PART02 STARTING '2011-01-01 00:00:00' INCLUSIVE  ENDING '2011-12-31 59:59:59' INCLUSIVE,
      PARTITION PART03 STARTING '2012-01-01 00:00:00' INCLUSIVE  ENDING '9999-12-31 59:59:59' INCLUSIVE )
  DISTRIBUTE BY HASH ( "STARTTIME" );

ALTER TABLE "xxxxxx"."TB_xxxxxx_TELRECORD_PARTTEST3"
  DATA CAPTURE NONE
  LOCKSIZE ROW
  APPEND OFF
  NOT VOLATILE;

GRANT CONTROL ON TABLE "xxxxxx"."TB_xxxxxx_TELRECORD_PARTTEST3" TO USER "xxxxxx";

GRANT SELECT, INSERT, UPDATE, ALTER, DELETE,
    INDEX, REFERENCES ON TABLE "xxxxxx"."TB_xxxxxx_TELRECORD_PARTTEST3" TO USER "xxxxxx" WITH GRANT OPTION;

COMMIT;


至此，表分区完成，当然要检测一下分区是否起作用。

1，检验分区确实是将数据分区了。

2，检验分区确实能提高查询效率。


一;可以插入肩挑数据，看看分区的各个区数据分布。





二，查看分区对查询的效率。

这里我用的是对第一个分区sql的检测结果。







测试1


方法selectPrepNoParam=====select * from TB_xxxxxx_TELRECORD_PARTTEST a  where a.id=900000
#################################
执行时间： 40秒,656毫秒
#################################




测试3


方法selectPrepNoParam=====select * from TB_xxxxx_TELRECORD_PARTTEST a  where a.STARTTIME>'20140601'
#################################
执行时间： 40秒,451毫秒
#################################


测试4


方法selectPrepNoParam=====select * from TB_xxxxxx_TELRECORD_PARTTEST a  
查询出结果集rs.next()
#################################
执行时间： 250毫秒
#################################






测试5


方法selectPrepNoParam=====select * from TB_xxxxxxx_TELRECORD_PARTTEST a  where 1=1
查询出结果集rs.next()
#################################
执行时间： 243毫秒
#################################







测试10


方法selectPrepNoParam=====select distinct d.id,d.name from TB_xxxx_TELRECORD_PARTTEST a,tb_agent_zj_zxpd2 
b,acl_oper c,acl_ag_grp d where a.id=b.tid and a.dealoper=c.logincode and c.groupid=d.id  and 
a.connectid!=''  and a.connectid!=upper('NULL')
#################################
执行时间： 46秒,59毫秒
#################################











//***************************************************************//
//**********************分析*************************************//
//**********************分析*************************************//
//**********************分析*************************************//
//**********************分析*************************************//
//**********************分析*************************************//








超过2秒的sql被认为影响用户体验。这些sql要在优化后作为优化结果的对比依据。




包括：


测试1


方法selectPrepNoParam=====select * from TB_xxxx_TELRECORD_PARTTEST a  where a.id=900000
#################################
执行时间： 40秒,656毫秒
#################################
测试3


方法selectPrepNoParam=====select * from TB_xxxxx_TELRECORD_PARTTEST a  where a.STARTTIME>'20140601'
#################################
执行时间： 40秒,451毫秒
#################################
测试6


方法othersqlPrepNoparam=====delete from TB_xxxx_TELRECORD_PARTTEST where ID=6528646
执行sql成功。
#################################
执行时间： 41秒,508毫秒
#################################


测试7


方法othersqlPrepNoparam=====update TB_xxxx_TELRECORD_PARTTEST set exammarkflag ='1'  where ID=6528645
执行sql成功。
#################################
执行时间： 40秒,840毫秒
#################################





测试10


方法selectPrepNoParam=====select distinct d.id,d.name from TB_xxxxxxx_TELRECORD_PARTTEST a,tb_agent_zj_zxpd2 
b,acl_oper c,acl_ag_grp d where a.id=b.tid and a.dealoper=c.logincode and c.groupid=d.id  and 
a.connectid!=''  and a.connectid!=upper('NULL')
#################################
执行时间： 46秒,59毫秒
#################################





//***********************************************************//
//***********************************************************//




//*********************分区以后测试**************************************//
//*********************分区以后测试**************************************//
//*********************分区以后测试**************************************//
//*********************分区以后测试**************************************//
//*********************分区以后测试**************************************//
//*********************分区以后测试**************************************//
//*********************分区以后测试**************************************//
//*********************分区以后测试**************************************//
//*********************分区以后测试**************************************//




测试1


方法selectPrepNoParam=====select * from TB_xxxxx_TELRECORD_PARTTEST a  where a.id=900000
#################################
执行时间： 4秒,847毫秒
#################################


测试3


方法selectPrepNoParam=====select * from TB_xxxxxxx_TELRECORD_PARTTEST a  where a.STARTTIME>'20140601'
#################################
执行时间： 38秒,228毫秒
#################################



测试6




方法othersqlPrepNoparam=====delete from TB_xxxxx_TELRECORD_PARTTEST where ID=6528645
执行sql成功。
#################################
执行时间： 354毫秒
#################################




测试7


方法othersqlPrepNoparam=====update TB_xxxx_TELRECORD_PARTTEST set exammarkflag ='1'  where ID=6528644
执行sql成功。
#################################
执行时间： 338毫秒
#################################



测试10


方法selectPrepNoParam=====select distinct d.id,d.name from TB_xxxxxxx_TELRECORD_PARTTEST a,tb_agent_zj_zxpd2 
b,acl_oper c,acl_ag_grp d where a.id=b.tid and a.dealoper=c.logincode and c.groupid=d.id  and 
a.connectid!=''  and a.connectid!=upper('NULL')
#################################
执行时间： 339毫秒
#################################




//***************************end********************************//






索隆
关注
DB2创建分区表
zoeyxy的专栏
03-14 8307
CREATE TABLE . ( USER_ID INTEGER NOT NULL, NAME VARCHAR(30),.... )--以上是正常创建表步骤，以下是创建分区表需要增加的 in tbs_data index in tbs_indx partition by range(part_day) ( partition p001 starting 1 ending 1, part
db2 数据表分区
aichong0240的博客
09-28 2912
1. 表分区说明 在db2数据库中，可对数据表按某个字段进行分区，分区好处是：可扩展表的存储能力、对于大量数据表使用分区字段可提高查询效率。表分区不同于数据库分区，需要在创建表的时候设置分区逻辑。 　 在定义表分区的字段时，有几个原则：1.不支持创建只包含长数据类型的多分区表，2.不能改变分区建定义，3.分区键应该包含最频繁连接的列，4.分区键应该由经常参与group by...
db2 分区表
荣耀之路
06-16 4865
创建表空间、分区表、索引；初始分区表数据 db2 connect to saldev db2 "create tablespace tbs1 managed by database using ( file'/dbfile/database/saldev/db2inst1/NODE0000/SALDEV/tbs1.bat' 200M)" db2 "create tablespace
db2分区
阿昊的博客
07-22 2580
db2表分区 （一）字段类型TIMESTAMP字段类型按月份自动分区 （二）TIMESTAMP字段类型自定义名称按月分区 （三）CHARACTER字段类型分区 （四）CHARACTER字段类型按月份自动分区
db2表分区的创建方法
06-09
在DB2数据库中，表分区是一种优化数据管理与查询性能的技术。通过将大表分成较小、更易管理的部分，可以提高查询效率，特别是在处理大量数据时。以下是对创建DB2表分区的详细说明： 1. **日期方式创建表分区** - ...
db2表分区建立与卸载
彼岸花的眼泪
10-24 3627
自己用过的一个例子，有用采纳，没用勿喷。 采用数据库分区最主要的原因之一： 将一个大的数据库分成多个小的数据库可以提高查询的性能，因为每个数据库分区拥有自己的一小部分数据。假设您想扫描1亿条记录，对一个单一分区的数据库来讲，该扫描操作需要数据库管理器独立扫描一亿条记录，如果您将数据库系统做成50个分区，并将这1亿条记录平均分配到这50个分区上，那么每个数据库分区的数据库管理器将只扫描200万记...
DB2 表分区
wfq826qfw的专栏
11-20 2375
对于给定的表数据范围自动生成分区的语法是： PARTITION BY ([ColumnName] ,...) ( STARTING [Start | MINVALUE | MAXVALUE] | STARTING ([Start | MINVALUE | MAXVALUE] ,...) ENDING [End | MINVALUE | MA
db2 最大分区数_DB2表分区数据清空维护
weixin_39585974的博客
12-19 458
清空一张表的数据，我们可以truncate这张表，亦或是用replace的方式加载一个空文件来清空表。那么如果现在我只需清空表的某个分区的数据话，要如何来做呢？2B青年说：“直接delete + 条件嘛。”那好，现在我有张表的情况是这样的：每个分区中都有1G多点的数据，现在用delete来删除1号分区的数据。总用时4分钟不到点。4分钟里可以沏个茶，上个小号外面溜达一圈不是蛮好，2B青年果然欢乐多。...
DB2 数据库创建表分区
weixin_39897534的博客
11-24 1176
本文主要记录在DB2数据库中创建表分区。
db2分区表在线迁移
04-13
db2分区表在线迁移 db2分区表在线迁移 db2分区表在线迁移
DB2 表分区创建与管理
huryer的专栏
09-06 2254
DB2 表分区创建与管理 表分区创建脚本 -- 创建表空间 --https://www.ibm.com/support/knowledgecenter/zh/SSEPGG_10.5.0/com.ibm.db2.luw.admin.dbobj.doc/doc/t0004953.html CREATE TABLESPACE ts_2011 INCREASESIZE 1g; CREATE TABLESPACE ts_2012 INCREASESIZE 1g; CREATE TABLESPACE ts_max IN
DB2查看表分区和某表模式的记录数
u011498933的专栏
12-31 3427
--查看表分区 SELECT * FROM SYSCAT.datapartitions WHERE TABNAME='table_name' --添加表分区 alter table table_name add partition statis_month STARTINT'201301' INCLUSIVE ENDING '20090102' INCLUSIVE --查看表模式里面表的记录数 select tabname,card from syscat.tables where tabschema .
DB2分区表详解
最新发布
Gorden的博客
10-16 1231
db2分区表
DB2 V9表分区
软件工程 plus 人工智能
04-17 4604
DB2 V9表分区   DB2 V9新增了表分区功能,因此对一些大表,我们在DB2 V9中不再需要分拆成小表,再用UNION ALL视图的方式进行设计,而是直接用分区表实现一些这些功能｡表分区功能是一种数据组织方案,即,表数据根据一个或多个表列中的值分布到多个存储对象(称为数据分区或范围)中｡每个数据分区都是单独存储的｡这些存储对象可以在不同的表空间中,也可以在相同表空间中｡由于表分区是DB2
DB2分区表创建及分区索引的创建
热门推荐
sidy的专栏
07-24 2万+
一直用oracle数据库，近期刚接触
DB2 分区
King's program process
08-10 4315
DB2 9 表分区 改进大型数据库的管理 Paul Read (paul_read@uk.ibm.com),产品推介经理, EMC Richard Hewitt (richard_hewitt@uk.ibm.com), DB2 顾问, IBM UK Paul Read,产品推介经理, EMC Richard Hewitt,DB2顾问, IBM UK 简介： 本教程旨在演
【DB2数据库创建分区表】
03-27 1170
创建表空间 CREATE TABLESPACE DMS01   CREATE TABLESPACE dms02   CREATE TABLESPACE dms03   创建表 CREATE TABLE artists ( artno SMALLINT NOT NULL PRIMARY KEY, name VARCHAR(50), picture BLOB(2M) NOT ...
db2 产看查看表分区，添加表分区
爱于心健于行
07-07 1万+
--查看表分区SELECT * FROM SYSCAT.datapartitions WHERE TABNAME='table_name'--添加表分区alter table table_name  add partition statis_month STARTINT'201301' INCLUSIVE ENDING '20090102' INCLUSIVE  ...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值