删除数据表中的重复数据,
情况有两种:
一是数据表中的所有字段都相同,我们只想保存当中的一条记录,则进行如下的操作:
1)创建一个结构和原表相同的记录,并将原表中的唯一数据放入
CREATE TABLE 临时表 AS (select distinct * from 原表名);
2)删除原表中的所有数据
trunc 原表名
3)插入数据到原表
insert into 原表名 (select * from 临时表);
二是数据表中的部份字段相同,我们想删除所有重复记录(一条也不保留)的时候,进行如下操作:
1)查询出所有的重复数据
select 字段1,字段2,count(*) from 原表名 group by 字段1,字段2 having count(*) > 1
注:having子句是在结果中查询
如果将上面的">"改成=,则是查询不重复的数据
2)删除
delete 原表名 where 字段1,字段2 in (select 字段1,字段2,count(*) from 原表名 group by 字段1,字段2 having count(*) > 1)
但需要注意的是:上面的执行效率非常低下,不推荐使用,一般使用下面的方法:
1)先创建临时表,将重复记录先放入
CREATE TABLE 临时表 AS
(select 字段1,字段2,count(*) from 原表名 group by 字段1,字段2 having count(*) > 1)
2)删除
delete from 原表名 a where 字段1,字段2 in (select 字段1,字段2 from 临时表);
如果数据表中的部份字段相同,而我们需要保存最近一条数据的话。可以使用数据库的伪列rowid,如下操作
1)查询重复数据
select a.rowid,a.* from 原表名 a
where a.rowid !=
(
select max(b.rowid) from 原表名 b
where a.字段1 = b.字段1 and
a.字段2 = b.字段2
)
2)删除
delete from 原表名 a
where a.rowid !=
(
select max(b.rowid) from 原表名 b
where a.字段1 = b.字段1 and
a.字段2 = b.字段2
)
同样上面的效率也低,也用临时表来处理
1)创建临时表
create table 临时表 as
select a.字段1,a.字段2,MAX(a.ROWID) dataid from 原表名 a GROUP BY a.字段1,a.字段2;
2)删除
delete from 原表名 a
where a.rowid !=
(
select b.dataid from 临时表 b
where a.字段1 = b.字段1 and
a.字段2 = b.字段2
);