java sqlldr_sqlldr使用(转)

本文详细介绍了如何使用SQL*Loader将带有特定格式的CSV文件(如换行分隔)导入Oracle数据库,包括设置控制文件、处理多行记录和字段选项。重点讲解了控制文件的编写及注意事项,适合数据迁移和ETL过程。
摘要由CSDN通过智能技术生成

sqlldr使用

sqlldr 使用:

sqlldr是oracle提供的一个比较好用的平面文件数据倒入工具,可以倒入带有格式的数据等比较规范的文本文件。

加载方式有:传统路径(conventional path),利用sql插入为我们加载的数据和直接路径(direct

path)。

必需要有一个 数据文件和一个控制文件,日志文件可选(不指定的话,会自动生成的)。

数据文件的分隔符需要指定合适,否则会出现混乱。控制文件是告诉sqlldr数据文件和表的对应关系以及一些处理规则

命令:

Sqlldr userid=user/password@SID

control=loader.ctl log=loade.log bad=loader.bad

Sqlldr 这个是应用程序的命令,pr_tmp

表对应的user,control控制文件,log日志,bad不合法的数据。

loader.ctl例子:

load data

infile 'd:/pr.csv' "str X'78696179756C61690D0A'"

into table pr_tmp

fields terminated by "," OPTIONALLY ENCLOSED BY '"' TRAILING

NULLCOLS

(ID char(256) ,MID char(256),SUBT char(256),KS char(512),DES

char(4000),SY char(256),CM char(256),PC char(512),EID char(256),OD

char(256));

其中 "str X'78696179756C61690D0A'"

是指定以什么样的符号作为结束的。78696179756C61690D0A 这串字符的生成方式:

select utl_raw.cast_to_raw('xiayulai'||chr(13)||chr(10)) from

dual;意思是以xiayulai加回车换行结束。这里要注意,xiayulai||chr(13)||chr(10)并不能被load到数据库中去。

这样就可以处理换行但是并不是一条记录的结束的平面文件,也就是有回车格式的文件。

fields terminated by "," 这个是指每个字段的结束符,OPTIONALLY ENCLOSED BY '"'

表示""之间的是一个字段,

但是如果不指定换行符又遇到换行符时会错。

TRAILING NULLCOLS 是指定空的单元格用null填充。

控制文件中MID char(256)

的长度默认是256,如果需要指定的话,可以如上指定,但是最好是指定的长一点,因为平面文件中经常会出现一些比较长的字段,

先贤倒入数据库再说,否则报错就不好了。

默认是insert ,可以是append,replace.

execl 文件先另存为以逗号为间隔的csv文件。

找了好久才找到一条记录包含多行时的处理方法!感谢原作者

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
java代码中调用执行shell脚本,sqlldr导数与使用sqlplus在shell调用执行存储过程。 linux环境中有2个dba的用户:oracle、erm 还有1个web用户:erm 在linux环境中,这三个用户都可以直接在任意目录下执行该shell脚本,可是在java代码中调用shell脚本时,报了如下4个错误: 1、sqlldr: command not found 2、sqlplus: command not found 3、0750: You may need to set ORACLE_HOME to your Oracle software directory 4、Message 2100 not found; No message file for product=RDBMS, facility=ULMessage 2100 not found; No message file for product=RDBMS, facility=UL$ 检查了dba用户和web用户下关于oracle的所有环境变量发现没有问题 (/home/oracle/.profile 与 /home/erm/.profile 环境变量文件为隐藏文件需使用 ls -a 命令查看) 在网上查了一遍以后有如下几种处理办法: 1、没有oracle_home目录的执行权限,无法进入到bin目录,使用chmod 755 $oracle_home更改目录权限;使用chmod 755 $oracle_home/lib更改目录权限;对目录$oracle_home/rdbms/mesg目录赋予相应权限;当需要给非oracle用户配置使用sqlldr时,不单需要配置环境变量,还需要把相关目录的访问权限赋予该用户。【采用此法测试以后还是出现上面的错误】 2、用sh直接执行shell和在java直接执行shell是有区别的,要在shell文件内增加oracle的环境变量即. /home/oracle/.bash_profile 这句话,否则在执行sqlldr会报如下异常: Message 2100 not found; No message file for product=RDBMS...... facility=UL 【采用此法测试以后继续报错,但是这个方法有引导作用,继续往下看】 因为我在linux环境下执行shell脚本时sqlldr命令和sqlplus命令是正常执行的,没有任何问题,但是在java代码中调用脚本时却报错,所有排除了其他原因,只可能是环境变量的问题, 于是我把oracle的所有环境变量直接复制到shell脚本文件中,在java中调用了一下,然后所有问题迎刃而解! 具体代码参看文件内容
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值