shell解决我繁琐的sqlldr操作

    最近一直在忙着sqlldr的相关操作,每次要倒入200G的csv文件到库里,就修改控制文件消耗了我大把大把的时间呐,今天索性不不写了,好好观察了下,发现文件都有规律可循,于是就试着写了个简单的shell脚本,经过测试还行,每次只需要修改一个控制文件就行,算是把我从重复性工作中解脱出来了...
 
一下是大致内容:
 
[oracle@test test]$ ll
total 20
-rwxrwxrwx. 1 oracle oinstall  355 Aug 12 01:21 change.sh
-rw-r--r--. 1 oracle oinstall  163 Aug 12 00:17 ctl.ctl
drwxr-xr-x. 2 oracle oinstall 4096 Aug 12 01:17 file_temp
drwxr-xr-x. 2 oracle oinstall 4096 Aug 12 01:17 log
drwxr-xr-x. 2 oracle oinstall 4096 Aug 12 01:14 testsource
 

#!/bin/bash
file_in=/tmp/test/testsource
file_temp=/tmp/test/file_temp
for file_a in ${file_in}/*; do
    cp $file_a $file_temp/test.csv
    filename=`basename $file_a`
    sqlldr test/test control=/tmp/test/ctl.ctl bad=/tmp/test/test.bad  log=/tmp/test/test.log  direct=true
    rm -rf $file_temp/*
    mv /tmp/test/test.log /tmp/test/log/$filename
done
 

[oracle@test test]$ cat ctl.ctl
load data
infile '/tmp/test/file_temp/test.csv'
into table test append
fields terminated by ',' TRAILING NULLCOLS(
id terminated by ',',
name terminated by '\n'
)
 
 
总结:工作需要动脑子 .....留此日志以作纪念!

来自 “ ITPUB博客 ” ,链接:http://blog.itpub.net/26143577/viewspace-704757/,如需转载,请注明出处,否则将追究法律责任。

转载于:http://blog.itpub.net/26143577/viewspace-704757/

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
在java代码中调用执行shell脚本,sqlldr导数与使用sqlplus在shell调用执行存储过程。 linux环境中有2个dba的用户:oracle、erm 还有1个web用户:erm 在linux环境中,这三个用户都可以直接在任意目录下执行该shell脚本,可是在java代码中调用shell脚本时,报了如下4个错误: 1、sqlldr: command not found 2、sqlplus: command not found 3、0750: You may need to set ORACLE_HOME to your Oracle software directory 4、Message 2100 not found; No message file for product=RDBMS, facility=ULMessage 2100 not found; No message file for product=RDBMS, facility=UL$ 检查了dba用户和web用户下关于oracle的所有环境变量发现没有问题 (/home/oracle/.profile 与 /home/erm/.profile 环境变量文件为隐藏文件需使用 ls -a 命令查看) 在网上查了一遍以后有如下几种处理办法: 1、没有oracle_home目录的执行权限,无法进入到bin目录,使用chmod 755 $oracle_home更改目录权限;使用chmod 755 $oracle_home/lib更改目录权限;对目录$oracle_home/rdbms/mesg目录赋予相应权限;当需要给非oracle用户配置使用sqlldr时,不单需要配置环境变量,还需要把相关目录的访问权限赋予该用户。【采用此法测试以后还是出现上面的错误】 2、用sh直接执行shell和在java直接执行shell是有区别的,要在shell文件内增加oracle的环境变量即. /home/oracle/.bash_profile 这句话,否则在执行sqlldr会报如下异常: Message 2100 not found; No message file for product=RDBMS...... facility=UL 【采用此法测试以后继续报错,但是这个方法有引导作用,继续往下看】 因为我在linux环境下执行shell脚本时sqlldr命令和sqlplus命令是正常执行的,没有任何问题,但是在java代码中调用脚本时却报错,所有排除了其他原因,只可能是环境变量的问题, 于是我把oracle的所有环境变量直接复制到shell脚本文件中,在java中调用了一下,然后所有问题迎刃而解! 具体代码参看文件内容
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值