sqlldr结合批处理将数据文件批量导入数据库并实现自动化

业务场景需求，需要将生成的100多个RPT格式的数据文件导入oracle数据库，并做成自动化。
需求梳理：
1.oracle客户端自带sqlldr工具可以实现文件的导入导出
2.sqlldr的控制文件可以实现多个文件同时导入
3.控制文件的参数需要用到数据文件的路径
4.数据文件路径可以用批处理.bat文件生成

提取数据文件路径写入flilename.txt
@ECHO OFF
@setlocal enabledelayedexpansion
dir /a-d /b /s *.rpt >>flilename.txt

将文件路径处理为控制文件可读的格式写入新文件temp.txt
@ECHO OFF
SET mystart=infile"
SET myend="
FOR /f %%i IN (flilename.txt) DO (

temp.txt ECHO %mystart%%%i%myend%
)

sqlldr控制文件
options(skip=7,rows=10000,parallel=true)
load data
badfile “bad.txt”
append into table tmp
fields terminated by “,”
TRAILING NULLCOLS
(FILLER_1 FILLER,
FILLER_2 FILLER,
MODEL_POINT “CASE WHEN :MODEL_POINT>=0 THEN :MODEL_POINT END”,
GAAP_BEL_IF ,
GAAP_PAD_IF ,
GAAP_PVP_IF ,
GAAP_RES_IF ,
PLANCODE OPTIONALLY ENCLOSED BY ‘"’,
POL_NUMBER OPTIONALLY ENCLOSED BY ‘"’)

将处理好的文件路径从第3行插入sqlldr控制文件
@ECHO OFF
@set n=1
@for /f “delims=” %%i in (tmp.ctl) do (
@if “!n!”==“3” goto N
@echo %%i >>temp.ctl
@set /a n=n+1
)

:N
@type temp.txt>>temp.ctl
@for /f “skip=2 delims=” %%j in (tmp.ctl) do @echo %%j >>temp.ctl

执行sqlldr导入数据
sqlldr odsuser/odsuser_2019@X4ODS control=D:\测试文件\temp.ctl log=D:LOG日志文件\1111.log skip=7

最后完善：
合并所有的批处理文件
@ECHO OFF
@setlocal enabledelayedexpansion
dir /a-d /b /s *.rpt >>flilename.txt

SET mystart=infile"
SET myend="
FOR /f %%i IN (flilename.txt) DO (

temp.txt ECHO %mystart%%%i%myend%
)

@set n=1
@for /f “delims=” %%i in (tmp.ctl) do (
@if “!n!”==“3” goto N
@echo %%i >>temp.ctl
@set /a n=n+1
)

:N
@type temp.txt>>temp.ctl
@for /f “skip=2 delims=” %%j in (tmp.ctl) do @echo %%j >>temp.ctl

sqlldr odsuser/odsuser_2019@X4ODS control=D:测试文件\temp.ctl log=D:\LOG日志文件\1111.log skip=7

将合并后的.bat文件和控制文件放在数据文件目录下，双击.bat文件既可实现数据文件批量上传