Oracle-数据库的导入&导出

0. kill掉连接、删除用户和数据、导入后重置用户密码

--查看未断开的连接
SQL>select machine,sid,serial#  from v$session where username='HXAPP';
--kill掉为断开的连接
SQL>alter system kill session 'sid,serial#';
--删除用户和数据
SQL>drop user hxapp cascade;
--修改用户密码
SQL>alter user hxapp identified by hxapp;

1. 权限配置及导入导出

1.1 配置导入导出目录及设置相应权限

SQL>select * from dba_directories dir where dir.DIRECTORY_NAME in ('DUMPDIR','DATA_PUMP_DIR');

可以根据自己的需要更改目录

--给用户赋予数据文件目录读写权限 语法：
grant read,write on directory DUMPDIR to 用户名;
grant read,write on directory DUMPDIR to system;

-- 创建目录对象及赋权限
CREATE OR REPLACE DIRECTORY DUMPDIR_FT AS '/home/oracle/user/ft/unload';
GRANT READ,WRITE ON DIRECTORY DUMPDIR_FT to hxapp;

--查看目录及权限
SELECT privilege, directory_name, DIRECTORY_PATH
  FROM user_tab_privs t, all_directories d
 WHERE t.table_name(+) = d.directory_name
 ORDER BY 2, 1;

1.2 导出

# 例子：按照schema方式导出
expdp hxapp/hxapp directory=DUMPDIR dumpfile=hxapp_20200924_%u.dmp parallel=8 schemas=hxapp logfile=exp_hxapp.log

# 例子：按照表导出
expdp hxapp/hxapp@cbsznckdb tables=hxapp.kapp_sysdat,hxapp.kdpp_zaxcsb dumpfile =expdp_test2.dmp logfile=expdp_test2.log directory=DUMPDIR job_name=my_job

# 例子：按照表指定分区导出
expdp hxapp/hxapp@cbsznckdb tables=hxapp.kdpl_zhminx:KDPL_ZHMINX_P240102 dumpfile =expdp_test2.dmp logfile=expdp_test2.log directory=DUMPDIR job_name=my_job

# 例子：按查询条件导出
expdp hxapp/hxapp@cbsznckdb tables=lttfm.kapp_sysdat dumpfile=expdp_test3.dmp logfile=expdp_test3.log directory=DUMPDIR job_name=my_job query='"where rownum<11"'

# 例子：多表关联查询条件导出(也可使用parfile形式，具体使用方法百度)
expdp hxapp/hxapp@cbsznckdb TABLES=hxapp.kdpl_zhminx dumpfile=kdpl_zhminx.dmp logfile=kdpl_zhminx.log directory=DUMPDIR job_name=my_job query='kdpl_zhminx:"WHERE EXISTS(SELECT m.zhanghao FROM kdpy_znjbxx m WHERE m.znegckbz = '2' and ku$.zhanghao = m.zhanghao)"';

# 例子：按照表空间导出
expdp hxapp/hxapp@cbsznckdb dumpfile=expdp_tablespace.dmp tablespaces=TEST_DATA logfile=expdp_tablespace.log directory=DUMPDIR job_name=my_job

# 例子：按照库导出
expdp hxapp/hxapp@cbsznckdb dumpfile=full.dmp full=y logfile=full.log directory=dir_dp job_name=my_job

expdp命令介绍
1. attach
该选项用于在客户会话与已存在导出作用之间建立关联.语法如下
ATTACH=[schema_name.]job_name
Schema_name用于指定方案名，job_name用于指定导出作业名。注意,如果使用ATTACH选项，在命令行除了连接字符串和ATTACH选项外，不能指定任何其他选项,示例如下：
Expdp scott/tiger ATTACH=scott.export_job

2. CONTENT
该选项用于指定要导出的内容.默认值为ALL
CONTENT={ALL | DATA_ONLY | METADATA_ONLY}
当设置CONTENT为ALL时，将导出对象定义及其所有数据。为DATA_ONLY时，只导出对象数据，为METADATA_ONLY时，只导出对象定义。
Expdp scott/tiger DIRECTORY=dump DUMPFILE=a.dump CONTENT=METADATA_ONLY

3. DIRECTORY
指定转储文件和日志文件所在的目录
DIRECTORY=directory_object
Directory_object用于指定目录对象名称.需要注意，目录对象是使用CREATE DIRECTORY语句建立的对象，而不是OS目录
Expdp scott/tiger DIRECTORY=dump DUMPFILE=a.dump

4. DUMPFILE
用于指定转储文件的名称,默认名称为expdat.dmp
DUMPFILE=[directory_object:]file_name [,….]
Directory_object用于指定目录对象名,file_name用于指定转储文件名.需要注意,如果不指定directory_object,导出工具会自动使用DIRECTORY选项指定的目录对象
Expdp scott/tiger DIRECTORY=dump1 DUMPFILE=dump2:a.dmp

5. ESTIMATE
指定估算被导出表所占用磁盘空间分方法.默认值是BLOCKS
ESTIMATE={BLOCKS | STATISTICS}
设置为BLOCKS时,oracle会按照目标对象所占用的数据块个数乘以数据块尺寸估算对象占用的空间,设置为STATISTICS时,根据最近统计值估算对象占用空间
Expdp scott/tiger TABLES=emp ESTIMATE=STATISTICS DIRECTORY=dump DUMPFILE=a.dump

6. ESTIMATE_ONLY
指定是否只估算导出作业所占用的磁盘空间,默认值为N
EXTIMATE_ONLY={Y | N}
设置为Y时,导出作用只估算对象所占用的磁盘空间,而不会执行导出作业,为N时,不仅估算对象所占用的磁盘空间,还会执行导出操作.
Expdp scott/tiger ESTIMATE_ONLY=y NOLOGFILE=y

7. EXCLUDE(具体见2、Exclude导出用户中指定类型的指定对象)
该选项用于指定执行操作时释放要排除对象类型或相关对象
EXCLUDE=object_type[:name_clause] [,….]
Object_type用于指定要排除的对象类型,name_clause用于指定要排除的具体对象.EXCLUDE和INCLUDE不能同时使用
Expdp scott/tiger DIRECTORY=dump DUMPFILE=a.dup EXCLUDE=VIEW

8. FILESIZE
指定导出文件的最大尺寸,默认为0,(表示文件尺寸没有限制)

9. FLASHBACK_SCN
指定导出特定SCN时刻的表数据
FLASHBACK_SCN=scn_value
Scn_value用于标识SCN值.FLASHBACK_SCN和FLASHBACK_TIME不能同时使用
Expdp scott/tiger DIRECTORY=dump DUMPFILE=a.dmp FLASHBACK_SCN=358523

10. FLASHBACK_TIME
指定导出特定时间点的表数据
FLASHBACK_TIME=”TO_TIMESTAMP(time_value)”
Expdp scott/tiger DIRECTORY=dump DUMPFILE=a.dmp FLASHBACK_TIME=“TO_TIMESTAMP(’25-08-2004 14:35:00’,’DD-MM-YYYY HH24:MI:SS’)”

11. FULL
指定数据库模式导出,默认为N
FULL={Y | N}
为Y时,标识执行数据库导出.

12. HELP
指定是否显示EXPDP命令行选项的帮助信息,默认为N
当设置为Y时,会显示导出选项的帮助信息.
Expdp help=y

13. INCLUDE（具体见1、Include导出用户中指定类型的指定对象）
指定导出时要包含的对象类型及相关对象
INCLUDE = object_type[:name_clause] [,… ]

14. JOB_NAME
指定要导出作用的名称,默认为SYS_XXX
JOB_NAME=jobname_string
SELECT * FROM DBA_DATAPUMP_JOBS;--查看存在的job

15. LOGFILE
指定导出日志文件文件的名称,默认名称为export.log
LOGFILE=[directory_object:]file_name
Directory_object用于指定目录对象名称,file_name用于指定导出日志文件名.如果不指定directory_object.导出作用会自动使用DIRECTORY的相应选项值.
Expdp scott/tiger DIRECTORY=dump DUMPFILE=a.dmp logfile=a.log

16. NETWORK_LINK
指定数据库链名,如果要将远程数据库对象导出到本地例程的转储文件中,必须设置该选项.
如：expdp gwm/gwm directory=dir_dp NETWORK_LINK=igisdb tables=p_street_area dumpfile =p_street_area.dmp logfile=p_street_area.log     job_name=my_job
igisdb是目的数据库与源数据的链接名，
dir_dp是目的数据库上的目录
而如果直接用使用连接字符串(@fgisdb),expdp属于服务端工具，expdp生成的文件默认是存放在服务端的

17. NOLOGFILE
该选项用于指定禁止生成导出日志文件,默认值为N.

18. PARALLEL
指定执行导出操作的并行进程个数,默认值为1
注：并行度设置不应该超过CPU数的2倍，如果cpu为2个，可将PARALLEL设为2，在导入时速度比PARALLEL为1要快
    而对于导出的文件，如果PARALLEL设为2，导出文件只有一个，导出速度提高不多，因为导出都是到同一个文件，会争抢资源。所以可以设置导出文件为两个,如下所示：
    expdp gwm/gwm directory=d_test dumpfile=gwmfile1.dp,gwmfile2.dp parallel=2

19. PARFILE
指定导出参数文件的名称
PARFILE=[directory_path] file_name

20. QUERY
用于指定过滤导出数据的where条件
QUERY=[schema.] [table_name:] query_clause
Schema 用于指定方案名,table_name用于指定表名,query_clause用于指定条件限制子句.QUERY选项不能与 CONNECT=METADATA_ONLY,EXTIMATE_ONLY,TRANSPORT_TABLESPACES等选项同时使用.
Expdp scott/tiger directory=dump dumpfile=a.dmp Tables=emp query=’WHERE deptno=20’

21. SCHEMAS
该方案用于指定执行方案模式导出,默认为当前用户方案.

22. STATUS
指定显示导出作用进程的详细状态,默认值为0

23. TABLES
指定表模式导出
TABLES=[schema_name.]table_name[:partition_name][,…]
Schema_name用于指定方案名,table_name用于指定导出的表名,partition_name用于指定要导出的分区名.

24. TABLESPACES
指定要导出表空间列表

25. TRANSPORT_FULL_CHECK
该选项用于指定被搬移表空间和未搬移表空间关联关系的检查方式,默认为N.
当 设置为Y时,导出作用会检查表空间直接的完整关联关系,如果表空间所在表空间或其索引所在的表空间只有一个表空间被搬移,将显示错误信息.当设置为N时, 导出作用只检查单端依赖,如果搬移索引所在表空间,但未搬移表所在表空间,将显示出错信息,如果搬移表所在表空间,未搬移索引所在表空间,则不会显示错误 信息.

26. TRANSPORT_TABLESPACES
指定执行表空间模式导出

27. VERSION
指定被导出对象的数据库版本,默认值为COMPATIBLE.
VERSION={COMPATIBLE | LATEST | version_string}
为COMPATIBLE时,会根据初始化参数COMPATIBLE生成对象元数据;为LATEST时,会根据数据库的实际版本生成对象元数据.version_string用于指定数据库版本字符串.调用EXPDP

1.3 导入

# 例子：按表导入
hxapp_20200924_%u.dmp文件中的表，此文件是以hxapp用户按schemas=hxapp导出的：
impdp hxapp/hxapp@cbsznckdb dumpfile=hxapp_20200924_%u.dmp logfile=kapp_sysdat.log directory=DUMPDIR tables=kapp_sysdat job_name=my_job

# 例子：按用户导入（可以将用户信息直接导入，即如果用户信息不存在的情况下也可以直接导入）
impdp hxapp/hxapp@cbsznckd schemas=hxapp dumpfile=hxapp_20200924.dmp logfile=expdp_test.log directory=DUMPDIR job_name=my_job

# 例子：不通过expdp的步骤生成dmp文件而直接导入，从源数据库中向目标数据库导入表p_street_area
# igisdb是目的数据库与源数据的链接名，DUMPDIR是目的数据库上的目录
impdp hxapp/hxapp directory=DUMPDIR NETWORK_LINK=igisdb tables=kapp_sysdat logfile=kapp_sysdat.log job_name=my_job

# 例子：按照表空间导入
# 如果是用sys用户导出的用户数据，包括用户创建、授权部分，用自身用户导出则不含这些内容
impdp system/oracle directory=DUMPDIR parallel=16 dumpfile=hxapp_20230320_NJ_%u.dmp remap_tablespace=LNNX_DATA:TEST_DATA,LNNX_DATA_INDEX:TEST_DATA LOGTIME=all

impdp命令介绍

1、REMAP_DATAFILE
该选项用于将源数据文件名转变为目标数据文件名,在不同平台之间搬移表空间时可能需要该选项.
REMAP_DATAFIEL=source_datafie:target_datafile

2、REMAP_SCHEMA
该选项用于将源方案的所有对象装载到目标方案中.
REMAP_SCHEMA=source_schema:target_schema

3、REMAP_TABLESPACE
将源表空间的所有对象导入到目标表空间中
REMAP_TABLESPACE=source_tablespace:target:tablespace

4、REUSE_DATAFILES
该选项指定建立表空间时是否覆盖已存在的数据文件.默认为N
REUSE_DATAFIELS={Y | N}

5、SKIP_UNUSABLE_INDEXES
指定导入是是否跳过不可使用的索引,默认为N

6、SQLFILE
指定将导入要指定的索引DDL操作写入到SQL脚本中
SQLFILE=[directory_object:]file_name
Impdp scott/tiger DIRECTORY=dump DUMPFILE=tab.dmp SQLFILE=a.sql

7、STREAMS_CONFIGURATION
指定是否导入流元数据(Stream Matadata),默认值为Y.

8、TABLE_EXISTS_ACTION
该选项用于指定当表已经存在时导入作业要执行的操作,默认为SKIP
TABBLE_EXISTS_ACTION={SKIP | APPEND | TRUNCATE | FRPLACE }
当 设置该选项为SKIP时,导入作业会跳过已存在表处理下一个对象;当设置为APPEND时,会追加数据,为TRUNCATE时,导入作业会截断表,然后为 其追加新数据;当设置为REPLACE时,导入作业会删除已存在表,重建表病追加数据,注意,TRUNCATE选项不适用与簇表和 NETWORK_LINK选项

9、TRANSFORM
该选项用于指定是否修改建立对象的DDL语句
TRANSFORM=transform_name:value[:object_type]
Transform_name 用于指定转换名,其中SEGMENT_ATTRIBUTES用于标识段属性(物理属性,存储属性,表空间,日志等信息),STORAGE用于标识段存储属 性,VALUE用于指定是否包含段属性或段存储属性,object_type用于指定对象类型.
Impdp scott/tiger directory=dump dumpfile=tab.dmp Transform=segment_attributes:n:table

10、TRANSPORT_DATAFILES
该选项用于指定搬移空间时要被导入到目标数据库的数据文件
TRANSPORT_DATAFILE=datafile_name
Datafile_name用于指定被复制到目标数据库的数据文件
Impdp system/manager DIRECTORY=dump DUMPFILE=tts.dmp
TRANSPORT_DATAFILES=’/user01/data/tbs1.f’调用IMPDP

11、LOGTIME=all
将时间信息输出到控制台和日志里

注：导入时，tables、schemas、full这三个参数不能同时出现

2. exclude/include

一、exclude/include参数用法：

EXCLUDE=[object_type]:[name_clause],[object_type]:[name_clause] -->排出特定对象
INCLUDE=[object_type]:[name_clause],[object_type]:[name_clause] -->包含特定对象

object_type子句用于指定对象的类型，如table,sequence,view,procedure,package等等
name_clause子句可以为SQL表达式用于过滤特定的对象名字。

它由SQL操作符以及对象名(可使用通配符)来过滤指定对象类型中的特定对象。当未指定name_clause而仅仅指定object_type则所有该类型的对象都将被过滤或筛选。多个[object_type]:[name_clause]中间以逗号分割。

二、常用的过滤SQL表达式

--过滤所有的SEQUENCE,VIEW
EXCLUDE=SEQUENCE,VIEW

--过滤表对象EMP,DEPT
EXCLUDE=TABLE:"IN ('EMP','DEPT')"

--过滤所有的SEQUENCE,VIEW以及表对象EMP,DEPT 
EXCLUDE=SEQUENCE,VIEW,TABLE:"IN ('EMP','DEPT')" 

--过滤指定的索引对象INDX_NAME
EXCLUDE=INDEX:"= 'INDX_NAME'"

--包含以PROC_U开头的所有存储过程(_ 符号代表任意单个字符) 
INCLUDE=PROCEDURE:"LIKE 'PROC_U%'" 

--包含大于字符E的所有表对象
INCLUDE=TABLE:"> 'E' "                          

其它常用操作符 NOT IN, NOT LIKE, <, != 等等 直接将过滤操作符封装到参数文件中，如下面的例子

Parameter file:exp_scott.par DIRECTORY=dump_scott DUMPFILE=exp_scott_%U.dmp LOGFILE=exp_scott.log SCHEMAS=scott  PARALLEL=2 EXCLUDE=TABLE:"IN ('EMP', 'DEPT')"

expdp system/manager parfile=exp.par 

3. 在impdp/expdp模式下处理任务

Ctrl+C组合键：在执行导入或者导出的过程中，可以按Ctrl+C组合键退出当前交互模式，退出之后，导入或者导出操作不会停止

3.1 查看有哪些正在执行的session

查询dba_datapump_sessions视图

sqlplus / as sysdba
select * from dba_datapump_sessions;

3.2 重新进入impdp/expdp模式

--语法：impdp/expdp OWNER_NAME/PASSWORD attach=JOB_NAME
impdp/expdp SYSTEM/oracle attach=SYS_IMPORT_FULL_03

3.3 查看任务的进度

--查看当前JOB的状态及相关信息
Import/Export>status

Import> status

Job: SYS_IMPORT_FULL_03
  Operation: IMPORT                         
  Mode: FULL                           
  State: EXECUTING                      
  Bytes Processed: 13,488,599,144
  Percent Done: 1
  Current Parallelism: 16
  Job Error Count: 0
  Job heartbeat: 1
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_%u.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_01.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_02.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_03.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_04.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_05.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_06.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_07.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_08.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_09.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_10.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_11.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_12.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_13.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_14.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_15.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_16.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_17.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_18.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_19.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_20.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_21.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_22.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_23.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_24.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_25.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_26.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_27.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_28.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_29.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_30.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_31.dmp
  Dump File: /home/oracle/oradump/hxapp_20230320_NJ_32.dmp
  
Worker 1 Status:
  Instance ID: 1
  Instance name: cbsznckdb
  Host name: idszxdb
  Object start time: Friday, 31 March, 2023 15:57:54
  Object status at: Friday, 31 March, 2023 15:57:54
  Process Name: DW00
  State: EXECUTING                      
  Object Schema: HXAPP
  Object Name: KLNL_DKJXMX
  Object Type: SCHEMA_EXPORT/TABLE/TABLE_DATA
  Partition: KLNL_DKJXMX_P230113
  Completed Objects: 11
  Completed Rows: 718,397
  Completed Bytes: 125,626,584
  Percent Done: 29
  Worker Parallelism: 1
...                
...
...
...
Worker 16 Status:
  Instance ID: 1
  Instance name: cbsznckdb
  Host name: idszxdb
  Object start time: Friday, 31 March, 2023 15:54:52
  Object status at: Friday, 31 March, 2023 15:54:52
  Process Name: DW0F
  State: EXECUTING                      
  Object Schema: HXAPP
  Object Name: KDPA_ZHXINX
  Object Type: SCHEMA_EXPORT/TABLE/TABLE_DATA
  Completed Objects: 119
  Completed Rows: 7,682,430
  Completed Bytes: 12,022,225,072
  Percent Done: 8
  Worker Parallelism: 1
  
Import> 

3.4 停止正在执行的任务

--暂停JOB（暂停job后会退出expor模式）
Import/Export>stop_job

3.5 打开暂停的任务

--打开暂停的JOB（并未开始重新执行）
Import/Export>start_job

3.6 通过此命令重新启动任务

--通过此命令重新启动 "SYSTEM"."SYS_IMPORT_FULL_02":
Import/Export>continue_client

3.7 取消任务

--取消当前的JOB并释放相关客户会话（将job删除同时删除dmp文件(应该不会删除dmp文件，没有尝试过)）
Import/Export>kill_job

3.8 退出Import/Export模式

--通过此命令退出Import/Export模式（通过3.2）可再进入Import/Export模式下）
Import/Export>exit_client