Linux环境下使用定时器通过sqlldr向oracle数据库导入数据

背景:

文件服务器每天都会生成若干张表的数据文件,需要将这些文件里的数据导入到oracle数据库中,为了实现自动化导入,采用的是linux定时任务执行shell脚本通过sqlldr命令来导入。需要注意的是在shell脚本中需要设置好oracle的环境变量,要不然在cron定时任务调用脚本时sqlldr命令将无法执行。


用v_inst_users表举例:

数据库表v_inst_users:

CREATE TABLE V_INST_USERS
(
  imsi        VARCHAR2(60), 
  telephone   VARCHAR2(20), 
  city_code   VARCHAR2(20), 
  log_date    DATE 
)

shell脚本import.sh:

#!/bin/sh
#设置必要的环境变量(使用定时器的时候必须设置环境变量)
export NLS_LANG=AMERICAN_AMERICA.ZHS16GBK
ORACLE_HOME=/u01/app/oracle/product/102/db_1
export ORACLE_HOME

date=`date +%Y%m%d`
mon=`date +%Y%m`

#ctl文件目录
ctldr=/home/oracle/data/ctl
#导入日志目录
cd /home/oracle/data/ctllog

if [ ! -d "$mon" ]; then
  mkdir $mon
  echo "创建月目录$mon"
fi
cd $mon
if [ ! -d "$date" ]; then
  mkdir $date
  echo "创建天目录$tt"
fi

#导入
$ORACLE_HOME/bin/sqlldr userid/password@orcl control=$ctldr/imp_to_v_inst_users.ctl log=$logdr/log_v_inst_users_$date.log bad=$logdr/bad_v_inst_users_$date.log;
控制文件imp_to_v_inst_users.ctl:
LOAD DATA
INFILE 'V_INST_USERS.ITF'
APPEND INTO TABLE v_inst_users
FIELDS TERMINATED BY ','
TRAILING NULLCOLS
(
  imsi,
  telephone,
  city_code,
  log_date DATE "YYYY-MM-DD HH24:MI:SS"
)

数据文件V_INST_USERS.ITF:

460030406111111,13311111111,4206,2016-05-18 21:57:29
460110451222222,18022222222,4414,2016-05-18 21:57:32
460036121333333,15333333333,3204,2016-05-18 22:10:04


定时任务配置:

执行命令:crontab -e 编辑定时任务

40 9 * * * /home/oracle/data/import.sh > /home/oracle/data/importlog/import_`date +"\%Y\%m\%d"`.log
  • 4
    点赞
  • 18
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
以下是一个示例脚本,用于连接Oracle数据库导入表: ``` #!/bin/bash #设置连接信息 user="username" password="password" host="hostname" port="port" database="database_name" #设置导入表信息 schema="schema_name" table="table_name" input_file="/path/to/input/file.csv" #连接数据库导入sqlplus -S $user/$password@$host:$port/$database <<EOF set feedback off set verify off set heading off set pagesize 0 set linesize 2000 set trimspool on set echo off --创建临时表 create table tmp_$table as select * from $schema.$table where 1=2; --导入数据到临时表 alter session set nls_date_format='yyyy-mm-dd hh24:mi:ss'; set colsep ',' set numwidth 38 set trimspool on set term off set feedback off set verify off set heading off set pagesize 0 set linesize 32767 set echo off spool /dev/null @/path/to/sqlldr.ctl $input_file spool off --导入数据到目标表 insert into $schema.$table select * from tmp_$table; --删除临时表 drop table tmp_$table; exit; EOF ``` 上面的脚本首先设置了连接信息和导入表的信息。然后,它使用sqlplus命令连接到数据库,并使用SQL语句创建一个临时表。接下来,它使用sqlldr命令将数据从CSV文件加载到临时表中。最后,它使用insert语句将数据从临时表复制到目标表中,并删除临时表。请注意,您需要将脚本中的用户名,密码,主机名,端口号,数据库名称,模式名称,表名称,输入文件路径和sqlldr控制文件路径更改为适合您的环境的值。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值