sqlldr导入数据

1.创建scott用户demo1表

create table scott.demo1
(
id varchar2(40),
name varchar2(20),
description varchar2(40),
timsts timestamp
)

2.创建csv文件

demo.csv
id,name,,description
a,zhangsan,,备注张三
b,lisi,,备注李四
c,wangwu,,备注王五

3.创建控制文件ctl.ctl

load data
infile 'E:\oracle\data\demo.csv'
badfile 'e:\oracle\data\demo_detail.bad' 
replace 
into table scott.demo1
when (1) <> 'id'
fields terminated by ','

optionally enclosed by '"' 
(id "seq_demo1.nextval",  --自增
name "'Hi '||upper(:name)", --使用函数
timsts "systimestamp", --时间戳
description)

4.运行语句：
sqlldr scott/orcl@orcl control=e:\oracle\data\ctl.ctl log=e:\oracle\data\ctlog.log

===========================================================================
Oracle实现数据不存在则插入，数据存在则更新（insert or update）
--创建一个函数 如果数据存在则覆盖 不存在则新增
create or replace function merge_into(
--timsts in timestamp, 时间戳暂时不用写
v_id in varchar2,
v_name in varchar2,
v_description in varchar2)

return number is
numb number;

begin
  select count(*)
  into numb
  from demo1
  where id = v_id;
  if numb = 0 then
    --数据不存在，insert
    begin
      insert into demo1
      (id,name,description)
      values(seq_demo1.nextval,v_name,v_description);
      commit;
     end;
    else 
      --数据存在，upadate
      begin
        update demo1
               set name=v_name,
               description=v_description
           where id=v_id;
        commit;
      end;
    end if;
    return numb;
end merge_into;


调用函数测试
begin 
  dbms_output.put_line(merge_into('41','函数','ss'));
end;

select * from demo1
         
select merge_into('41','函数','ss') from dual;

=================================================================
思路：
1.根据id判断和时间戳，是否新增，创建一个额外列记录是否insert  update 
2.导入目标表的时候，获取中间表数据，调用函数进行数据更新
--写函数循环获取demo1表数据并写入目标表里

--存储过程 从中间表导入到目标表数据  中间表demo1  目标表demo2
--存储过程 从中间表导入到目标表数据  中间表demo1  目标表demo2
create or replace function merge_demo2
return number 
       is--声明变量
       numb number;
       v_id varchar2(40);
       v_name varchar2(20);
       v_description varchar2(40);
       cursor ids_cursor is select id,name,description from demo1;
       --游标循环使用
       begin  --开始循环
         for i in ids_cursor loop
           begin
           select count(*) into numb from demo2 where id = i.id;
           v_id :=i.id;
           v_name:=i.name;
           v_description:=i.description;
           if numb=0 then
             --数据不存在，insert
              begin
               insert into demo2
                (id,name,description)
                values(v_id,v_name,v_description);
                commit;
               end;
             else
               --数据存在，update
               begin
               update demo2
               set name=v_name,
               description=v_description
               where id=v_id;
               commit;
               end;
               end if;
               end;
         end loop;--循环结束
         return numb;
         
 end merge_demo2;



=======================================================
执行存储函数
begin 
  dbms_output.put_line(merge_demo2);
end;

结果：
select * from demo2


当数据量过大时 运行特慢 7分钟17w