oracle修改字段类型效率,14亿条记录，12c 做不到2小时内变更表结构字段类型?

最新推荐文章于 2022-10-20 12:21:35 发布

哲是个瘦过的胖子

最新推荐文章于 2022-10-20 12:21:35 发布

阅读量701

点赞数

文章标签： oracle修改字段类型效率

COUNT(*)----------1399999996

Elapsed: 00:00:17.39

创建临时表，有35个分区，部份省略了，主键、索引等都不要建。

CREATE TABLE "CUSTINFO"."INT_OM_OFFERING_INST_TEST" ("BUSINESS_SEQ" VARCHAR2(20),"PROD_ID" NUMBER(20, 0),"OFFERING_INST_ID" NUMBER(20, 0),"OFFERING_ID" NUMBER(20, 0),"OFFERING_NAME" VARCHAR2(256),"OFFERING_CODE" VARCHAR2(50),"CUST_TYPE" VARCHAR2(20),"CUST_ID" NUMBER(20, 0),"BRAND" VARCHAR2(50),......"RECORD_STATUS" NUMBER(3, 0) DEFAULT 1)PARTITION BY LIST ( "BE_ID" ) ( PARTITION "P_000" VALUES ( '000' ),PARTITION "P_001" VALUES ( '001' ),PARTITION "P_002" VALUES ( '002' ) ,PARTITION "P_100" VALUES ( '100' ) ,PARTITION "P_200" VALUES ( '200' ) ,..........

定义参数，设置并行和行迁移。

define USERNAME = 'CUSTINFO'; --用户名define SOURCE_TAB = 'OM_OFFERING_INST_TEST';-- 原表名define INT_TAB = 'INT_OM_OFFERING_INST_TEST';-- 临时表名，需要手工提前创建define PARALLELS = 35; --并行数，这里设的分区数alter session enable parallel dml ;alter session force parallel dml parallel &PARALLELS;alter session force parallel query parallel &PARALLELS;alter table &INT_TAB enable row movement; --临时表开启行迁移

检查原表是否支持在线重定义，比较快，仅用了1秒不到。

SQL> begin2 dbms_redefinition.can_redef_table(uname => '&USERNAME',3 tname => '&SOURCE_TAB',4 options_flag => DBMS_REDEFINITION.CONS_USE_PK);5 end;6 /PL/SQL procedure successfully completedExecuted in 0.027 seconds

映射字段类型，启动重定义进程，用了近10分钟，稍微有点慢。从这里开始到结束，如果中途有错误，想要重来，需要调abort_redef_table过程取消任务。

SQL> set timing on;SQL> begin2 DBMS_REDEFINITION.START_REDEF_TABLE(uname => '&USERNAME',3 orig_table => '&SOURCE_TAB',4 int_table => '&INT_TAB',5 col_mapping => 'to_number(owner_party_role_id) owner_party_role_id,7 to_number(offering_inst_id) offering_inst_id,8 to_number(subs_id) subs_id,9 to_number(group_id) group_id,10 to_number(apply_obj_id) apply_obj_id', --这里只列举了需要变更的字段类型11 options_flag => DBMS_REDEFINITION.CONS_USE_PK);12 end;/PL/SQL procedure successfully completed

Executed in 576.565 seconds

复制依赖对象，这里只复制了主键约束，耗时54分钟，如果全部复制，我在测试跑了3个小时没有结果，直接Kill了。

SQL> DECLARE2 num_errors PLS_INTEGER;3 BEGIN4 DBMS_REDEFINITION.COPY_TABLE_DEPENDENTS(uname => '&USERNAME',5 orig_table => '&SOURCE_TAB',6 int_table => '&INT_TAB',7 copy_indexes => 0,8 copy_triggers => FALSE,9 copy_constraints => TRUE,10 copy_privileges => FALSE,11 ignore_errors => FALSE,12 num_errors => num_errors,13 copy_statistics => FALSE);14 END;15 /PL/SQL procedure successfully completedExecuted in 3230.441 seconds

异步同步数据，耗时28秒，比较快。

SQL> begin2 dbms_redefinition.sync_interim_table(uname => '&USERNAME',3 orig_table => '&SOURCE_TAB',4 int_table => '&INT_TAB');5 end;6 /PL/SQL procedure successfully completed

Executed in 27.908 seconds

完成在线重定义，结束任务，耗时73秒，也是比较快。

SQL> begin2 dbms_redefinition.finish_redef_table(uname => '&USERNAME',3 orig_table => '&SOURCE_TAB',4 int_table => '&INT_TAB');5 end;6 /PL/SQL procedure successfully completed

Executed in 72.302 seconds

创建索引，这个分区表上的索引不多，就3个普通索引，开53个并行，平均每个耗时4分钟左右，累计13分钟。

SQL> CREATE INDEX "CUSTINFO"."INX_OM_OFFERING_INST_TEST_CUSTID" ON "CUSTINFO"."OM_OFFERING_INST_TEST" ("CUST_ID") online parallel 35;Index createdExecuted in 257.138 seconds

SQL> CREATE INDEX "CUSTINFO"."INX_OM_OFFERING_INST_TEST_GROUPID" ON "CUSTINFO"."OM_OFFERING_INST_TEST" ("GROUP_ID") online parallel 35;

Index createdExecuted in 244.853 seconds

SQL> CREATE INDEX "CUSTINFO"."INX_OM_OFFERING_INST_TEST_SUBSID" ON"CUSTINFO"."OM_OFFERING_INST_TEST" ("SUBS_ID") online parallel 35;

Index createdExecuted in 261.665 seconds

收集统计信息,同样也是开35个并行，耗时4分钟左右。CASCADE => true表示收集表、列、索引等。

SQL> exec dbms_stats.gather_table_stats(ownname => 'CUSTINFO',tabname => 'OM_OFFERING_INST_TEST',CASCADE => true,degree => 35);PL/SQL procedure successfully completed.Elapsed: 00:04:18.35

取消表、索引上的并行度，检查字段是否修改成功，删除临时表，至此整个修改过程结束，这里耗时约10分钟左右。

--取消表上的并行alter table &SOURCE_TAB noparallel;--取消索引上的并行alter index INX_OM_OFFERING_INST_TEST_CUSTID noparallel;alter index INX_OM_OFFERING_INST_TEST_GROUPID noparallel;alter index INX_OM_OFFERING_INST_TEST_SUBSID noparallel;

--删除临时表drop table &INT_TAB;

总结

总计执行耗时：95分钟，不到2小时，效率上暂时能接受，如果有更好的办法，求拍砖，谢谢。

检查表定义 1秒

启动重定义进程 10分钟

复制依赖 54分钟

异步同步数据 28秒

执行结束任务 73秒

创建索引 13分钟

收集统计信息 4分钟

取消并行检查删除临时表 10分钟

墨天轮原文链接：https://www.modb.pro/db/22782(复制到浏览器中打开或者点击“阅读原文”) 返回搜狐，查看更多