Linux环境下使用定时器通过sqlldr向oracle数据库导入数据

背景:

文件服务器每天都会生成若干张表的数据文件,需要将这些文件里的数据导入到oracle数据库中,为了实现自动化导入,采用的是linux定时任务执行shell脚本通过sqlldr命令来导入。需要注意的是在shell脚本中需要设置好oracle的环境变量,要不然在cron定时任务调用脚本时sqlldr命令将无法执行。


用v_inst_users表举例:

数据库表v_inst_users:

CREATE TABLE V_INST_USERS
(
  imsi        VARCHAR2(60), 
  telephone   VARCHAR2(20), 
  city_code   VARCHAR2(20), 
  log_date    DATE 
)

shell脚本import.sh:

#!/bin/sh
#设置必要的环境变量(使用定时器的时候必须设置环境变量)
export NLS_LANG=AMERICAN_AMERICA.ZHS16GBK
ORACLE_HOME=/u01/app/oracle/product/102/db_1
export ORACLE_HOME

date=`date +%Y%m%d`
mon=`date +%Y%m`

#ctl文件目录
ctldr=/home/oracle/data/ctl
#导入日志目录
cd /home/oracle/data/ctllog

if [ ! -d "$mon" ]; then
  mkdir $mon
  echo "创建月目录$mon"
fi
cd $mon
if [ ! -d "$date" ]; then
  mkdir $date
  echo "创建天目录$tt"
fi

#导入
$ORACLE_HOME/bin/sqlldr userid/password@orcl control=$ctldr/imp_to_v_inst_users.ctl log=$logdr/log_v_inst_users_$date.log bad=$logdr/bad_v_inst_users_$date.log;
控制文件imp_to_v_inst_users.ctl:
LOAD DATA
INFILE 'V_INST_USERS.ITF'
APPEND INTO TABLE v_inst_users
FIELDS TERMINATED BY ','
TRAILING NULLCOLS
(
  imsi,
  telephone,
  city_code,
  log_date DATE "YYYY-MM-DD HH24:MI:SS"
)

数据文件V_INST_USERS.ITF:

460030406111111,13311111111,4206,2016-05-18 21:57:29
460110451222222,18022222222,4414,2016-05-18 21:57:32
460036121333333,15333333333,3204,2016-05-18 22:10:04


定时任务配置:

执行命令:crontab -e 编辑定时任务

40 9 * * * /home/oracle/data/import.sh > /home/oracle/data/importlog/import_`date +"\%Y\%m\%d"`.log
在java代码中调用执行shell脚本,sqlldr导数与使用sqlplus在shell调用执行存储过程。 linux环境中有2个dba的用户:oracle、erm 还有1个web用户:erm 在linux环境中,这三个用户都可以直接在任意目录下执行该shell脚本,可是在java代码中调用shell脚本时,报了如下4个错误: 1、sqlldr: command not found 2、sqlplus: command not found 3、0750: You may need to set ORACLE_HOME to your Oracle software directory 4、Message 2100 not found; No message file for product=RDBMS, facility=ULMessage 2100 not found; No message file for product=RDBMS, facility=UL$ 检查了dba用户和web用户下关于oracle的所有环境变量发现没有问题 (/home/oracle/.profile 与 /home/erm/.profile 环境变量文件为隐藏文件需使用 ls -a 命令查看) 在网上查了一遍以后有如下几种处理办法: 1、没有oracle_home目录的执行权限,无法进入到bin目录,使用chmod 755 $oracle_home更改目录权限;使用chmod 755 $oracle_home/lib更改目录权限;对目录$oracle_home/rdbms/mesg目录赋予相应权限;当需要给非oracle用户配置使用sqlldr时,不单需要配置环境变量,还需要把相关目录的访问权限赋予该用户。【采用此法测试以后还是出现上面的错误】 2、用sh直接执行shell和在java直接执行shell是有区别的,要在shell文件内增加oracle环境变量即. /home/oracle/.bash_profile 这句话,否则在执行sqlldr会报如下异常: Message 2100 not found; No message file for product=RDBMS...... facility=UL 【采用此法测试以后继续报错,但是这个方法有引导作用,继续往下看】 因为我在linux环境执行shell脚本时sqlldr命令和sqlplus命令是正常执行的,没有任何问题,但是在java代码中调用脚本时却报错,所有排除了其他原因,只可能是环境变量的问题, 于是我把oracle的所有环境变量直接复制到shell脚本文件中,在java中调用了一下,然后所有问题迎刃而解! 具体代码参看文件内容
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值