sql按时间取去重最近_如何高效实现批量插入数据，并去重

最近刚做了一个你说的类似需求：

我的业务需求是，

从oracle数据库中获取数据，然后同步到sqlserver中。

首先是配置两个数据库之间的连接设置。

我是sqlserver 连接oracle 配置sqlserver的链路服务器就OK。

下面是存储过程的内容了：

1. 创建临时表。

通过远程连接，insert into 临时表  select  远程表  。

获取数据先到本地，。

然后用 临时表的数据，跟你本地业务表的数据进行对比。

查询不通的数据。-- (1) 远程读取NC需求计划，分组汇总数据后，插入到临时表 #tmp_pl_plan中。

set @InsertStrSQL = @InsertStrSQL+ @tmpStrSQl;

print(@InsertStrSQL) ;

exec(@InsertStrSQL);

select @tmpCont = count(1) from #tmp_pl_plan ;

-- state:0新增、1修改、2删除

-- (2) 用本地数据与临时表中的数据，进行对比，更新本地表中计划数量与临时表中不相等的记录.

update t set t.plnum =a.plnum,t.state = 1

from #tmp_pl_plan a,NC_PL_PLAN t

where a.factorycode = t.factorycode and a.weldingdate = t.weldingdate

and a.divisions = t.divisions and a.zzmadeline = t.zzmadeline

and a.zzweldingwayCode = t.zzweldingwayCode and a.zzmadelinetypeCode = t.zzmadelinetypeCode

and a.convertedcode = t.convertedcode and a.ncfprocode = t.ncfprocode

and t.plnum != a.plnum

and t.weldingdate >= @fbegdate and t.weldingdate <= @fenddate

-- (3) 对比数据，查找本地表中存在，但是临时表中不存在的记录，然后修改本地表中的数量=0 ,state = 3 表示删除

update t set t.plnum = 0 ,t.state = 2

from NC_PL_PLAN t

where t.weldingdate between @fbegdate and @fenddate

and not exists (

select 1 from #tmp_pl_plan a where a.factorycode = t.factorycode and a.weldingdate = t.weldingdate

and a.divisions = t.divisions and a.zzmadeline = t.zzmadeline

and a.zzweldingwayCode = t.zzweldingwayCode and a.zzmadelinetypeCode = t.zzmadelinetypeCode

and a.convertedcode = t.convertedcode and a.ncfprocode = t.ncfprocode

);

-- (4) 对比数据，新增临时表中不存在于当前表的数据

--deleteNC_PL_PLAN;

insert into NC_PL_PLAN

select * from #tmp_pl_plan t

where t.weldingdate between @fbegdate and @fenddate

and not exists (

select 1 from NC_PL_PLAN a where a.factorycode = t.factorycode and a.weldingdate = t.weldingdate

and a.divisions = t.divisions and a.zzmadeline = t.zzmadeline

and a.zzweldingwayCode = t.zzweldingwayCode and a.zzmadelinetypeCode = t.zzmadelinetypeCode

and a.convertedcode = t.convertedcode and a.ncfprocode = t.ncfprocode

and a.weldingdate >= @fbegdate and a.weldingdate<= @fenddate

)

order by t.weldingdate desc ;

2014年9月18日 10:09