从零开始导入(imp),导出(dmp)Oracle数据

已于 2022-10-19 20:56:06 修改
阅读量4.1k 收藏 5
点赞数 1
分类专栏： 数据库 文章标签： oracle 数据库
于 2022-08-08 14:50:18 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/kurumigao/article/details/126000156
版权

具体任务：现有一个300+ G的dmp文件需要将其导入到Oracle数据库中，并且将其切分为若干的小的dmp文件

安装Oracle 11g

通过 docker 去 pull 阿里的镜像
具体流程参考

http://t.csdn.cn/Zbc6P

注意点

  1. 注意安装的版本，如果选择带有 XE 的版本，在导出的时候会受到输出空间的限制（32G左右）
  2. 输入的数据文件可通过宿主机和容器映射的方式来实现

  3. docker run -d --privileged=true -p 1521:1521 -e ORACLE_ALLOW_REMOTE=true -v [宿主机目录]:[镜像内的目录] --name oracle registry.cn-hangzhou.aliyuncs.com/helowin/oracle_11g

imp导入流程

1.登陆并创建用户

sqlplus /nolog --登录
conn /as sysdba
create user oracle_user identified by 【password】; – 创建内部管理员账号密码；

2.授权

grant connect,resource,dba to oracle_user; --将dba权限授权给内部管理员账号和密码；

3.设置

ALTER PROFILE DEFAULT LIMIT PASSWORD_LIFE_TIME UNLIMITED; --设置密码永不过期：
alter system set processes=1000 scope=spfile; --修改数据库最大连接数据；

4.导入数据
注意，这里可以指定表空间导入，可以去找相关帖子

imp [username]/[password]@[ip]:1521/[数据库实例名 helowin] file=‘[导入的文件位置]’ full=y ignore=y;

exp导出文件

命令

exp [username]/[password]@[ip]:1521/[数据库实例名] file=[导出的位置] tables=[, …] log=[日志导出位置] grants=y;

解决方案：
连接数据库，获取所有表名，大致计算每个表的大小，将所有表名进行分割后得到导出的exp语句

package org.example;
import java.sql.Connection;
import java.sql.DriverManager;
import java.sql.SQLException;
/**
 * @version 1.0
 * @Author kurumi
 * @Date 2022/7/26 19:24
 * @注释
 */
public class Conn {
    static String driverClass="oracle.jdbc.driver.OracleDriver"; //oracle的驱动
    static String url="jdbc:oracle:thin:@[ip]:1521:[实例名 这里是helowin]";  //连接oracle路径方式 “”gfs“”是要建立连接的数据库名 1521端口
    static String user="[user]";   //user是数据库的用户名
    static String password="[password]";  //用户登录密码

    public static Connection getconn() {  //为了方便下面的讲解，这里专门建立了一个用于数据库连接的一个方法
        Connection conn=null;
        try {
            //首先建立驱动
            Class.forName("oracle.jdbc.driver.OracleDriver");

            //驱动成功后进行连接
            conn=DriverManager.getConnection(url, user, password);

//            System.out.println("连接成功");
        } catch (SQLException e) {
            e.printStackTrace();
        } catch (Exception e) {
            e.printStackTrace();
        }
        return conn; //返回一个连接
    }
}

2.连接数据库并处理得到导出语句

oracle11g对应的jdbc版本

<dependency>
  <groupId>cn.easyproject</groupId>
  <artifactId>ojdbc6</artifactId>
  <version>11.2.0.4</version>
</dependency>

package org.example;
import java.sql.Connection;
import java.sql.ResultSet;
import java.sql.Statement;
import java.util.ArrayList;

/**
 * @version 1.0
 * @Author kurumi
 * @Date 2022/7/26 19:23
 * @注释
 */
public class GetExpInfo {

    public static void main(String[] args) {
        Connection conn=null;
        Statement st=null;
        ResultSet rs=null;

        ArrayList<String> tableNames = new ArrayList<>();
        try {
            //1、获取连接对象
            conn=Conn.getconn();
            //2、创建statement类对象，用来执行SQL语句！！
            st=conn.createStatement();
            //3、创建sql查询语句
            /*select table_name from all_tables where TABLESPACE_NAME ='USERS'

            select table_name from all_tables a where a.OWNER = upper('oracle_user') ORDER BY(TABLE_NAME);
            */
            String sql="select table_name from all_tables a where a.OWNER = upper('oracle_user') ORDER BY(TABLE_NAME)";
            //4、执行sql语句并且换回一个查询的结果集
            rs=st.executeQuery(sql);
            while(rs.next()) {  //循环遍历结果集

                String name=rs.getString("table_name");
                tableNames.add(name);
            }
        } catch (Exception e) {
            e.printStackTrace();
        }
        StringBuffer stringBuffer = new StringBuffer();
        ArrayList<String> resSQL = new ArrayList<>();
        int i = 0;
        //每次导出一百个表
        String start = tableNames.get(0);
        for (String tableName : tableNames) {
            if((i+1) % 100 == 0){
                String end = tableNames.get(i);
                String name = start+"-"+end+".dmp";
                stringBuffer.deleteCharAt(stringBuffer.lastIndexOf(","));
                resSQL.add("exp [user_name]/[password]@[ip]:1521/helowin " +
                        "file=/home/oracle/app/oracle/oradata-source/"+name+" tables="+stringBuffer.toString());
                stringBuffer.setLength(0);
                start = end;
            }
            stringBuffer.append(tableName+",");
            i++;
        }
        //剩下的表
        String end = tableNames.get(i-1);
        String name = start+"-"+end+".dmp";
        stringBuffer.deleteCharAt(stringBuffer.lastIndexOf(","));
        resSQL.add("exp [user_name]/[password]@[ip]:1521/helowin " +
                "file=/home/oracle/app/oracle/oradata-source/"+name+" tables="+stringBuffer.toString());

        for (String s : resSQL) {
            System.out.println(s);
        }

    }
}

3.服务器写一个脚本自动导入

vi block.sh

#! /bin/bash
exp [user_name]/[password]@[ip]:1521/helowin file=/home/oracle/app/oracle/oradata-source/[your file name1].dmp tables= [table1],[table2],[table3]......  
&&
exp [user_name]/[password]@[ip]:1521/helowin file=/home/oracle/app/oracle/oradata-source/[your file name2].dmp tables= [table1],[table2],[table3]......
&&
.......

执行block.sh脚本

遇到的问题

1 .exp 导出数据时候发生EXP-00091

EXP-00091: Exporting questionable statistics.
EXP-00091: Exporting questionable statistics.
EXP-00091: Exporting questionable statistics.

1.问题产生的原因
linux下oracle用户环境变量语言集和oracle数据库中的环境变量语言集不同

2.解决方法
只要将oracle环境变量语言集改成和数据库环境变量语言集一样的就可以

解决方案：

参考了

http://t.csdn.cn/2D7jC

1). 查看服务器端字符编码（注意是Oracle安装的服务器，对于docker是容器内的字符编码）
得到的字符集为 ‘AMERICAN_AMERICA.AL32UTF8’

SQL> select userenv(‘language’) from dual;
USERENV(‘LANGUAGE’)
AMERICAN_AMERICA.AL32UTF8

2). 返回命令行设置

[oracle@a5ee52623107 ~]$ export NLS_LANG=AMERICAN_AMERICA.AL32UTF8

3). 导出数据

[oracle@a5ee52623107 ~]$
exp [username]/[password]@[ip]:1521/[数据库实例名] file=[导出的位置] tables=[, …] log=[日志导出位置] grants=y;

2. imp导入的时候发生IMP-00058

错误信息

IMP-00058: ORACLE error 1658 encountered
ORA-01658: unable to create INITIAL extent for segment in tablespace USERS
. . importing table “xxxxxxxxx”
IMP-00058: ORACLE error 1658 encountered
ORA-01658: unable to create INITIAL extent for segment in tablespace USERS
. . importing table xxxxx"

or

. . importing table “xxxxxx” 出错
IMP-00058: ORACLE error 1659 encountered
ORA-01659: unable to allocate MINEXTENTS beyond 4 in tablespace USERS
. . importing table “xxxxxx”

错误原因
表空间大小不足造成的，可以在 navicat 中去实时查看当前要导入的表空间的利用率
在这里插入图片描述

另一种查看表空间利用率的方法 执行
SELECT UPPER(F.TABLESPACE_NAME) “【表空间名】”,
　　D.TOT_GROOTTE_MB “表空间大小(M)”,
　　D.TOT_GROOTTE_MB - F.TOTAL_BYTES “已使用空间(M)”,
　　TO_CHAR(ROUND((D.TOT_GROOTTE_MB - F.TOTAL_BYTES) / D.TOT_GROOTTE_MB * 100,2),‘990.99’) || ‘%’ “使用比”,
　　F.TOTAL_BYTES “空闲空间(M)”,
　　F.MAX_BYTES “最大块(M)”
　　FROM (SELECT TABLESPACE_NAME,
　　ROUND(SUM(BYTES) / (1024 * 1024), 2) TOTAL_BYTES,
　　ROUND(MAX(BYTES) / (1024 * 1024), 2) MAX_BYTES
　　FROM SYS.DBA_FREE_SPACE
　　GROUP BY TABLESPACE_NAME) F,
　　(SELECT DD.TABLESPACE_NAME,
　　 ROUND(SUM(DD.BYTES) / (1024 * 1024), 2) TOT_GROOTTE_MB
　　FROM SYS.DBA_DATA_FILES DD
　　GROUP BY DD.TABLESPACE_NAME) D
　　WHERE D.TABLESPACE_NAME = F.TABLESPACE_NAME
　　ORDER BY 1;

解决方法
增加数据文件来达到表空间扩容
注意
1.一般情况下单个数据文件最大32G左右的大小，这里设置了30G
2.就我所执行的任务而言，所需要的表空间大致为dmp文件大小的2倍左右

alter tablespace USERS add datafile ‘[path]/users01.dbf’ size 30720m autoextend on next 10240m MAXSIZE UNLIMITED;
alter tablespace USERS add datafile ‘/home/oracle/app/oracle/oradata/helowin/users02.dbf’ size 30720m autoextend on next 10240m MAXSIZE UNLIMITED;
alter tablespace USERS add datafile ‘/home/oracle/app/oracle/oradata/helowin/users03.dbf’ size 30720m autoextend on next 10240m MAXSIZE UNLIMITED;
alter tablespace USERS add datafile ‘/home/oracle/app/oracle/oradata/helowin/users04.dbf’ size 30720m autoextend on next 10240m MAXSIZE UNLIMITED;

另一种解决思路
可以在导入的时候指定要导入的表空间，如果数据文件很大的话，可以设置bigfile类型的表空间

3.exp导出的时候 EXP-00028

错误代码

EXP-00028: failed to open /home/oracle/app/oracle/oradata-source/test_dmp.dmp for write

错误原因

用户权限不够

解决方法

su - root
chown -R oracle:oinstall /home/oracle/app/oracle/oradata-source

4. Oracle imp导入服务端字符集不匹配的问题

Oracle服务端字符集编码为AL32UTF8，dmp文件编码字符集为ZHS16GBK，导入过程中由于有中文列发生错误

解决方法

docker创建一个新的容器后重置数据库的字符集，修改原有数据库的字符集可能会发生一定的风险

docker创建同一个镜像的不同的容器，修改name和端口即可
此外。还需要修改端口，采用默认端口1521可不用修改，这里以创建docker oracle容器时指定端口为1524：1524

vi /home/oracle/app/oracle/product/11.2.0/dbhome_2/network/admin/listener.ora



# listener.ora Network Configuration File: /home/oracle/app/oracle/product/11.2.0/dbhome_2/network/admin/listener.ora
# Generated by Oracle configuration tools.

LISTENER =
  (DESCRIPTION_LIST =
    (DESCRIPTION =
      (ADDRESS = (PROTOCOL = IPC)(KEY = EXTPROC1524))
      (ADDRESS = (PROTOCOL = TCP)(HOST = )(PORT = 1524))
    )
  )

ADR_BASE_LISTENER = /home/oracle/app/oracle

# 修改
vi /home/oracle/app/oracle/product/11.2.0/dbhome_2/network/admin/tnsnames.ora

# tnsnames.ora Network Configuration File: /home/oracle/app/oracle/product/11.2.0/dbhome_2/network/admin/tnsnames.ora
# Generated by Oracle configuration tools.

LISTENER_HELOWIN =
  (ADDRESS = (PROTOCOL = TCP)(HOST = localhost)(PORT = 1524))


HELOWIN =
  (DESCRIPTION =
    (ADDRESS = (PROTOCOL = TCP)(HOST = localhost)(PORT = 1524))
    (CONNECT_DATA =
      (SERVER = DEDICATED)
      (SERVICE_NAME = helowin)
    )
  )

修改字符集参考：
https://www.cnblogs.com/dll102/p/14822265.html

问题

imp导入发生错误，不晓得是不是创建容器时指定了不同的端口所造成的原因

IMP-00058: ORACLE error 12547 encountered
ORA-12547: TNS:lost contact
IMP-00000: Import terminated unsuccessfully

解决方法

去掉本机ip，命令改为 imp 用户名/密码@helowin full=y file=dmp文件 ignore=y full=y;

问题

import done in US7ASCII character set and AL16UTF16 NCHAR character set
import server uses ZHS16GBK character set (possible charset conversion)
export client uses ZHS16GBK character set (possible charset conversion)

解决方法

vi ~/.bash_profile

# bash_profile添加
export NLS_LANG=AMERICAN_AMERICA.ZHS16GBK

source ~/.bash_profile
mr.sorghum
关注
  • 1
    点赞
  • 踩
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Linux下Oracle如何导入导出dmp文件详解
09-09
主要给大家介绍了关于在Linux下Oracle如何导入导出dmp文件的相关资料，文中通过示例代码介绍的非常详细，对大家具有一定的参考学习价值，需要的朋友们下面来一起看看吧。
oracle11g通过cmd命令行导出、导入dmp文件（带图）
qq_45396650的博客
01-26 797
6、开始导入在导入前需要将你想要导入的数据库表的所属用户授权表空间，导入导出相关权限。出现对表空间USERS无权限的提示。在sys用户登录的命令行下给创建的角色赋予USERS表空间足够的权限和空间，这样我们就可以保持新增的数据了。到此导入导出就结束了注意：expdp和impdp命令只能在oracle服务端用，客户端请使用exp和imp！5、打开新的cmd，此命令在cmd运行不是在sqlplus中运行，可以看到导出成功。2、在oracle中创建一个用户名假设这里是WWT，并且授予可导出、导入的权限。
Dmp文件导入（Imp命令）
sunshine
04-19 3万+
四种导入模式 导入整个数据库： Shell:C:> imp user/pwd（用户名/密码） @网络服务器（RTDB） file=\ \ \文件名.dmp full=y（#导入全部） ignore=y（重新创建数据库的所有对象，不会因为对象已存在而造成输入操作错误） 导入特定的表： Shell:C:> imp user/pwd（用户名/密码） @网络服务器（RTDB） file=\ \ \文件名
Oracle12cR2之IMP与EXP命令行工具使用及参数说明
最新发布
yuanjinshenglife的专栏
02-19 1289
Oracle12cR2之IMP与EXP命令行工具使用及参数说明
Oracle导出的dmp格式文件导入到达梦的操作步骤
11-27
详细介绍了从Oracle数据库中导出的dmp格式的数据库文件再导入到达梦7中的操作步骤
oracle用imp导入dmp文件的方法
12-16
oracle命令行登录 sqlplus 用户名/密码 创建用户 create user 用户 identified by 密码 ; 创建表空间 create tablespace 表空间名 datafile 'D:\oracle11\oradata\库名\XXX.pdf' size 200M autoextend on next 50m maxsize 1000m ; 用户授权 grant connect ,resource to  用户名 ; 用创建的用户名和密码登录oracle数据库 conn 用户名/密码 最该权限授权 用最高权限账号登录 grant dba to 用户名 imp导入d
Oracle- imp/impdp导入dmp文件
小蜗牛的博客
03-08 6269
Oracle- imp/impdp导入dmp文件
Oracle imp/impdp、exp/expdp的使用方法
weixin_42064877的博客
05-10 3305
是系统预定义的角色，授予这两个角色可以让用户连接数据库和创建对象。命令时需要指定一个已经存在的目录，可以通过在Oracle中执行。命令时需要指定一个已经存在的目录，可以通过在Oracle中执行。是dmp文件所在的目录名，是要导出到的dmp文件名，是dmp文件导出的目录名，是要导出到的dmp文件名，是要导入的dmp文件名，是要导入的dmp文件名，是目标数据库的用户名，是目标数据库的用户名，需要注意的是，在使用。需要注意的是，在使用。是要授权的角色名称。
Oracle导入dmp文件imp导入和impdb导入及后续需要的用户、目录及表空间创建
ReturnToZero7的博客
10-26 2268
目录是directory属性用来指定导入导出dmp文件及日志文件的存放位置的。比如此时我有一个20180807.dmp备份出来的文件。
Oracle导入dmp文件
weixin_44782318的博客
10-09 1万+
Oracle的.dmp文件的导入导出操作
【第006篇】通过impdp命令导入dmp文件到Oracle11g数据库中
嘉&年华的博客
11-14 4738
通过impdp命令导入dmp文件到Oracle11g数据库中
oracle导入导出dmp|sql文件数据
09-30
文档中分步骤的详细列举了客户端导入导出dmp文件,sql文件的方法及每段命令的含义，同时包括服务器端导入导出dmp文件的方法，可以修改表空间及用户名称。很好的一份资料
impdp命令导入.dmp文件
u010029821的博客
09-16 3256
今天获取到一份oracle的dmp的文件，但设置导入的时候一直报错，说参数有误。文件expdp命令大概这样写的：expdp LXK/LXK schemas=LXK dumpfile=lxk_data.dmp logfile=lxk_bak.log directory = MY_APP 导入dmp的命令如下： impdp inputusername/password DUMPFILE=filename.dmp DIRECTORY=DATA_PUMP_DIR REMAP_SCHEMA=outputusern
使用impdp导入.dmp格式的文件
qq_43050077的博客
07-28 1756
PS：linux中oracle导入数据的方式有很多，比如常见的plsql数据进行导入，另外还有imp命令进行导入数据，我这边主要是通过impdp的方式进行数据的导入（.dmp文件） 首先你需要以下几个东西： 自己的用户名和密码 自己表空间的名字 导出数据方的用户名 导出数据方的表空间 不废话了，直接贴案例 注意：我这个是Linux中的，windows下面的都比较简单，我就不说了,但是原理差不多，没必要整这么麻烦 首先运行这个sql语句 select * from dba_directories;
cmd imp导入dmp文件_oracle导入dmp文件的2种方法
weixin_39657094的博客
12-22 1307
使用imp、impdp方式导入数据1.使用imp导入数据打开cmd窗口，然后直接敲入一下命令即可，需要注意的是，要事先把dmp文件放到正确的路径中去imp yx_base/@yx_192. file = E:\yxb\yx_base.dmp log = E:\yxb\yx_base.log full = y2.使用impdp导入数据(1)进入数据库服务器或本机打开cmd或shell命令界面，执行如...
linux环境下导出导入oracle的dmp文件。（exp,imp）
fu_jian_feng的博客
07-26 2万+
公司的检测认证一直和zsj是一套数据库，之前也是在zsj的数据库上做的数据项检测，决定新迁出一套数据库来给检测认证，方便检测折腾。 1.先去新建oracle用户，记得分配权限（dba.resource,contect） 下面为新建的数据库用户：    2.接下来就是导数据。从zsj系统中用到的用户到检测认证的用户中。登录数据库服务器（linux） 但是oracle用户没有ssh登
Oracle导入dmp文件步骤
编程怪的博客
01-14 2万+
1.创建表空间2000M并以10M增长 create tablespace 表空间名 datafile '放置表空间的路径' size 2000M autoextend on next 10M maxsize unlimited; 2.创建和授权用户权限 create user 用户名 identified by 密码 default tablespace 表空间名; grant exp_full_database to 用户名 ; grant imp_full_database to 用户名 ; gra
如何使用imp导入dmp文件
热门推荐
ACGkaka的博客
06-03 3万+
一、创建临时表空间： create temporary tablespace yd_temp tempfile 'D:\oracledata\file_temp.dbf'--路径根据实际情况填写size 50mautoextend on next 50m maxsize 2048m ...
Oracle的exp导出、imp导入数据命令
MssGuo的博客
07-13 3731
前言 环境：Centos 7.9 Oracle 11.2.4.0 Oracle使用exp命令导出数据 、 exp fujisieko/[email protected]:1521/orcl file=/home/oracle/imp_dep.dmp log=/home/oracle/imp_dep.log owner=fujiseiko full=y 说明：owner=sa 表示导出的表的所属用户是sa，full=y表示全部导出； 导入数据先创建表空间和用户： create tablespace TP
oracle imp导入dmp
08-18
你可以使用 Oracle 的 imp 工具来导入 .dmp 文件。以下是导入 .dmp 文件的一般步骤： 1. 打开命令行终端或者命令提示符。 2. 登录到你的数据库服务器上的 Oracle 实例。 3. 使用以下命令运行 imp 工具： ``` imp username/password@database file=your_dump_file.dmp full=y ``` 其中，`username` 是你的数据库用户名，`password` 是你的数据库密码，`database` 是你要导入数据的数据库名称，`your_dump_file.dmp` 是你要导入的 .dmp 文件名。`full=y` 表示导入整个数据库。 如果你只想导入特定的表或者数据，你可以使用其他选项来指定导入的对象。 4. 等待导入过程完成。导入时间取决于 .dmp 文件的大小和数据库的性能。 请注意，导入过程中可能会提示你输入一些额外的信息，比如是否覆盖已存在的对象等。根据你的需求进行选择即可。 希望这个回答能够帮助到你！如果你有任何其他问题，请随时提问。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值