java oracle sqlldr,oracle sqlldr

sql loader可以把一些以文本格式存放的数据顺利地导入到中，它是一种在不同数据库之间进行数据迁移非常方便而且通用的工具。缺点就是速度比较慢，另外对blob等类型的数据就有点麻烦了。

一、用法:SQLLDR keyword=value [,keyword=value,...]

二、有效的关键字:

userid -- ORACLE username/password

control –控制文件

log –记录的日志文件

bad –坏数据文件

data –数据文件

discard –丢弃的数据文件

discardmax–允许丢弃数据的最大值(全部默认)

skip -- Number of logical records to skip  (默认0)

load -- Number of logical records to load  (全部默认)

errors –允许的错误记录数(默认50)

rows -- Number of rows in conventional path bind array or between direct path data saves(每次提交的记录数，默认:常规路径64,所有直接路径)

bindsize -- Size of conventional path bind array in bytes(默认256000)

每次提交记录的缓冲区的大小(字节为单位，默认256000)

silent --禁止输出信息(header,feedback,errors,discards,partitions)

direct –使用直通路径方式导入(默认FALSE)

parfile -- parameter file: name of file that contains parameter specifications

parallel --并行导入(默认FALSE)

file -- File to allocate extents from

skip_unusable_indexes-- disallow/allow unusable indexes or index partitions(默认FALSE)

skip_index_maintenance-- do not maintain indexes, mark affected indexes as unusable(默认FALSE)

readsize -- Size of Read buffer                (默认1048576)

与bindsize成对使用，其中较小者会自动调整到较大者。sqlldr先计算单条记录长度，乘以rows，如小于bindsize，不会试图扩张rows以填充bindsize；如超出，则以bindsize为准。

external_table-- use external table for load; NOT_USED, GENERATE_ONLY, EXECUTE(默认NOT_USED)

columnarrayrows-- Number of rows for direct path column array(默认5000)

streamsize-- Size of direct path stream buffer in bytes(默认256000)

multithreading-- use multithreading in direct path

resumable -- enable or disable resumable for current session(默认FALSE)

resumable_name-- text string to help identify resumable statement

resumable_timeout-- wait time (in seconds) for RESUMABLE(默认7200)

date_cache-- size (in entries) of date conversion cache(默认1000)

注意：有两种方式可以指定命令行参数：通过位置或者通过关键字。

(1)通过位置指定命令行参数的例子：'sqlldr scott/tiger foo'；

(2)通过关键字指定命令行参数的例子：'sqlldr control=foo userid=scott/tiger'；

不能前面使用关键字指定后面通过位置指定的混合方式；

比如：'sqlldr scott/tiger control=foo logfile=log'是允许的；

但'sqlldr scott/tiger control=foo log'不允许。

通过位置指定命令行参数的时候，必须将“位置”放在user/passwd之前。

为清楚起见最好所有命令行参数都用关键字指定。

三、控制文件：一个控制命令的脚本文件，通常以ctl结尾，内容如下：

LOAD DATA

INFILE't.dat'             //要导入的文件

// INFILE 'tt.date'        //导入多个文件

// INFILE *              //表示要导入的内容就在control文件里下面的BEGINDATA后面就是导入的内容

INTO TABLEtable_name  //指定装入的表

BADFILE'c:\bad.txt'    //可选，指定坏文件地址,缺省在当前目录下生成与原文件名一致的.bad文件

//*************以下是4种装入表的方式

APPEND//原先的表有数据就加在后面

// INSERT            //装载空表如果原先的表有数据sqlloader会停止默认值

// REPLACE       //原先的表有数据原先的数据会全部删除

// TRUNCATE            //指定的内容和replace的相同会用truncate语句删除现存数据

//*************指定分隔符

FIELDS TERMINATED BY',' OPTIONALLY ENCLOSED BY '"'

// TERMINATED BY WRITESPACE //以空白分割

TRAILING NULLCOLS//表的字段没有对应的值时允许为空

*************下面是表的字段

(

col_1 , col_2 ,col_filler FILLER// FILLER关键字此列的数值不会被装载

//如: lg,lg,not结果lg lg

)

如果没声明FIELDS TERMINATED BY ','时，可以用下面两种方式实现同样功能：

(1)、为每一列指定分隔符

(

col_1 [interger external] TERMINATED BY ',' ,

col_2 [date "dd-mon-yyy"] TERMINATED BY ',' ,

col_3 [char] TERMINATED BY ',' OPTIONALLY ENCLOSED BY 'lg'

)

(2)、用位置告诉字段装载数据

(

col_1 position(1:2),

col_2 position(3:10),

col_3 position(*:16), //这个字段的开始位置在前一字段的结束位置

col_4 position(1:16),

col_5 position(3:10) char(8) //指定字段的类型

)

BEGINDATA         //对应开始的INFILE *要导入的内容就在control文件里

10，，what

20，lg，show

例子：

[oracle@ZR230-117 ~]$ vi a.ctl

Esc i

options (bindsize=655360,direct=true)

load data

infile '/usr/oracle/checkcode5.csv'

Append into table img_authcode

fields terminated by ';'

(pic_id,authcode,path)

：wq！

注：# bindsize每次提交记录的缓冲区direct使用直通方式，缺省为false

#读取'/usr/oracle/checkcode5.csv'这个excl文件

#添加到img_authcode这个表里

#每个字段间以“；”隔开

#分别对应pic_id,authcode,path这三个字段

#如果只导入一列，那么要注意用position标识一下字段长度：

options (bindsize=655360,direct=true)

load data

infile 'sex.txt'

insert into table id_temp

(id position(1:10))//从第一个字节开始到第十个结束

导入控制文件

[oracle@ZR230-117 ~]$ sqlldr member/member control=a.ctl

提示完成：

SQL*Loader: Release10.2.0.2.0 - Production on Thu Mar 20 09:47:24

Copyright (c) 1982, 2005, Oracle.All rights reserved.

Load completed - logical record count 10000.

查看一下，有无错误：

[oracle@ZR230-117 ~]$ more a.log

SQL*Loader: Release10.2.0.2.0 - Production on Thu Mar 20 09:47:24 2008

Copyright (c) 1982, 2005, Oracle.All rights reserved.

Control File:a.ctl

Data File:/usr/oracle/checkcode5.csv

Bad File:checkcode5.bad

Discard File:none specified

(Allow all discards)

Number to load: ALL

Number to skip: 0

Errors allowed: 50

Continuation:none specified

Path used:Direct

Table IMG_AUTHCODE, loaded from every logical record.

Insert option in effect for this table: APPEND

Column NamePositionLenTerm Encl Datatype

------------------------------ ---------- ----- ---- ---- ---------------------

PIC_IDFIRST*;CHARACTER

AUTHCODENEXT*;CHARACTER

PATHNEXT*;CHARACTER

The following index(es) on table IMG_AUTHCODE were processed:

index MEMBER.SYS_C0020883 loaded successfully with 10000 keys

Table IMG_AUTHCODE:

10000 Rows successfully loaded.

0 Rows not loaded due to data errors.

0 Rows not loaded because all WHEN clauses were failed.

0 Rows not loaded because all fields were null.

Bind array size not used in direct path.

Column arrayrows :5000

Stream buffer bytes:256000

Readbuffer bytes: 1048576

Total logical records skipped:0

Total logical records read:10000

Total logical records rejected:0

Total logical records discarded:0

Total stream buffers loaded by SQL*Loader main thread:2

Total stream buffers loaded by SQL*Loader load thread:0

Run began on Thu Mar 20 09:47:24 2008

Run ended on Thu Mar 20 09:47:25 2008