sql 删除相同记录

最新推荐文章于 2024-07-20 17:45:06 发布
最新推荐文章于 2024-07-20 17:45:06 发布
阅读量2k 收藏
点赞数
文章标签： sql delete table integer insert join
  SQL code 
  
  

   
   
   
   

   
   --
   
   如何按字段删除重复记录
   
   

   
   一张表里面以两个字段为唯一字段，当几条记录的这两个字段完全相同时，需要删除重复项，如下表
a b c d

   
   1
   
    
   
   2
   
    
   
   3
   
    
   
   4
   
   

   
   1
   
    
   
   5
   
    
   
   3
   
    
   
   5
   
   

   
   1
   
    
   
   2
   
    
   
   7
   
    
   
   9
   
   
以a、b为唯一字段，第一条和第三条的a、b完全相同，所以，需要删除第一条记录1 
   
   2
   
    
   
   3
   
    
   
   4
   
    或者第三条记录1 
   
   2
   
    
   
   7
   
    
   
   9
   
   
即如下结果：
a b c d

   
   1
   
    
   
   2
   
    
   
   3
   
    
   
   4
   
   

   
   1
   
    
   
   5
   
    
   
   3
   
    
   
   5
   
   
或
a b c d

   
   1
   
    
   
   5
   
    
   
   3
   
    
   
   5
   
   

   
   1
   
    
   
   2
   
    
   
   7
   
    
   
   9
   
   

请问各位大侠这种sql语句怎么写



   
   CREATE
   
    
   
   TABLE
   
    Tb1(id 
   
   int
   
   , 
   
   [
   
   a
   
   ]
   
    
   
   varchar
   
   (
   
   255
   
   ), 
   
   [
   
   b
   
   ]
   
    
   
   varchar
   
   (
   
   255
   
   ), 
   
   [
   
   c
   
   ]
   
    
   
   varchar
   
   (
   
   255
   
   ), 
   
   [
   
   d
   
   ]
   
    
   
   varchar
   
   (
   
   255
   
   ))

   
   INSERT
   
    Tb1(id, 
   
   [
   
   a
   
   ]
   
   , 
   
   [
   
   b
   
   ]
   
   , 
   
   [
   
   c
   
   ]
   
   , 
   
   [
   
   d
   
   ]
   
   )
           
   
   SELECT
   
    
   
   1
   
   , 
   
   '
   
   1
   
   '
   
   ,
   
   '
   
   2
   
   '
   
   ,
   
   '
   
   3
   
   '
   
   ,
   
   '
   
   4
   
   '
   
   

   
   UNION
   
    
   
   ALL
   
     
   
   SELECT
   
    
   
   2
   
   , 
   
   '
   
   1
   
   '
   
   ,
   
   '
   
   5
   
   '
   
   ,
   
   '
   
   3
   
   '
   
   ,
   
   '
   
   5
   
   '
   
   

   
   UNION
   
    
   
   ALL
   
     
   
   SELECT
   
    
   
   3
   
   , 
   
   '
   
   1
   
   '
   
   ,
   
   '
   
   2
   
   '
   
   ,
   
   '
   
   7
   
   '
   
   ,
   
   '
   
   9
   
   '
   
   

   
   UNION
   
    
   
   ALL
   
     
   
   SELECT
   
    
   
   4
   
   , 
   
   '
   
   1
   
   '
   
   ,
   
   '
   
   4
   
   '
   
   ,
   
   '
   
   7
   
   '
   
   ,
   
   '
   
   6
   
   '
   
   


   
   delete
   
    Tb1 
   
   where
   
    
   
   [
   
   id
   
   ]
   
    
   
   not
   
    
   
   in
   
    (
   
   select
   
    
   
   max
   
   (
   
   [
   
   id
   
   ]
   
   ) 
   
   from
   
    Tb1 
   
   group
   
    
   
   by
   
    a,b )

   
   select
   
    
   
   *
   
    
   
   from
   
    tb1
 

   
   drop
   
    
   
   table
   
    tb1

如果要同时删除第一和第三行
即如下结果：
a b c d

   
   1
   
    
   
   5
   
    
   
   3
   
    
   
   5
   
   

语句如下：


   
   delete
   
    m 
   
   from
   
    tb t

   
   inner
   
    
   
   join
   
   
(

   
   select
   
    a ,b

   
   from
   
    tb

   
   group
   
    
   
   by
   
    a , b

   
   having
   
    
   
   count
   
   (
   
   *
   
   )
   
   >
   
   1
   
   
)n

   
   on
   
    m.a 
   
   =
   
    n.a 
   
   and
   
    m.b 
   
   =
   
    n.b 
或

   
   delete
   
    
   
   *
   
    
   
   from
   
    tb 
   
   as
   
    m,
(

   
   select
   
    a ,b

   
   from
   
    tb

   
   group
   
    
   
   by
   
    a , b

   
   having
   
    
   
   count
   
   (
   
   *
   
   )
   
   >
   
   1
   
   
)n

   
   where
   
    m.a 
   
   =
   
    n.a 
   
   and
   
    m.b 
   
   =
   
    n.b 









   
   --
   
   ----------------------------------------------------------------------------------
   
   

   
   在几千条记录里,存在着些相同的记录,如何能用SQL语句,删除掉重复的呢?谢谢!

   
   1
   
   、查找表中多余的重复记录，重复记录是根据单个字段（peopleId）来判断

   
   select
   
    
   
   *
   
    
   
   from
   
    people

   
   where
   
    peopleId 
   
   in
   
    (
   
   select
   
     peopleId  
   
   from
   
     people  
   
   group
   
     
   
   by
   
     peopleId  
   
   having
   
     
   
   count
   
   (peopleId) 
   
   >
   
    
   
   1
   
   )


   
   2
   
   、删除表中多余的重复记录，重复记录是根据单个字段（peopleId）来判断，只留有rowid最小的记录

   
   delete
   
    
   
   from
   
    people 

   
   where
   
    peopleId  
   
   in
   
    (
   
   select
   
     peopleId  
   
   from
   
    people  
   
   group
   
     
   
   by
   
     peopleId   
   
   having
   
     
   
   count
   
   (peopleId) 
   
   >
   
    
   
   1
   
   )

   
   and
   
    rowid 
   
   not
   
    
   
   in
   
    (
   
   select
   
    
   
   min
   
   (rowid) 
   
   from
   
     people  
   
   group
   
    
   
   by
   
    peopleId  
   
   having
   
    
   
   count
   
   (peopleId )
   
   >
   
   1
   
   )


   
   3
   
   、查找表中多余的重复记录（多个字段） 

   
   select
   
    
   
   *
   
    
   
   from
   
    vitae a

   
   where
   
    (a.peopleId,a.seq) 
   
   in
   
     (
   
   select
   
    peopleId,seq 
   
   from
   
    vitae 
   
   group
   
    
   
   by
   
    peopleId,seq  
   
   having
   
    
   
   count
   
   (
   
   *
   
   ) 
   
   >
   
    
   
   1
   
   )


   
   4
   
   、删除表中多余的重复记录（多个字段），只留有rowid最小的记录

   
   delete
   
    
   
   from
   
    vitae a

   
   where
   
    (a.peopleId,a.seq) 
   
   in
   
     (
   
   select
   
    peopleId,seq 
   
   from
   
    vitae 
   
   group
   
    
   
   by
   
    peopleId,seq 
   
   having
   
    
   
   count
   
   (
   
   *
   
   ) 
   
   >
   
    
   
   1
   
   )

   
   and
   
    rowid 
   
   not
   
    
   
   in
   
    (
   
   select
   
    
   
   min
   
   (rowid) 
   
   from
   
    vitae 
   
   group
   
    
   
   by
   
    peopleId,seq 
   
   having
   
    
   
   count
   
   (
   
   *
   
   )
   
   >
   
   1
   
   )


   
   5
   
   、查找表中多余的重复记录（多个字段），不包含rowid最小的记录

   
   select
   
    
   
   *
   
    
   
   from
   
    vitae a

   
   where
   
    (a.peopleId,a.seq) 
   
   in
   
     (
   
   select
   
    peopleId,seq 
   
   from
   
    vitae 
   
   group
   
    
   
   by
   
    peopleId,seq 
   
   having
   
    
   
   count
   
   (
   
   *
   
   ) 
   
   >
   
    
   
   1
   
   )

   
   and
   
    rowid 
   
   not
   
    
   
   in
   
    (
   
   select
   
    
   
   min
   
   (rowid) 
   
   from
   
    vitae 
   
   group
   
    
   
   by
   
    peopleId,seq 
   
   having
   
    
   
   count
   
   (
   
   *
   
   )
   
   >
   
   1
   
   )

比方说在A表中存在一个字段“name”，而且不同记录之间的“name”值有可能会相同，
现在就是需要查询出在该表中的各记录之间，“name”值存在重复的项；

   
   Select
   
    Name,
   
   Count
   
   (
   
   *
   
   ) 
   
   From
   
    A 
   
   Group
   
    
   
   By
   
    Name 
   
   Having
   
    
   
   Count
   
   (
   
   *
   
   ) 
   
   >
   
    
   
   1
   
   

如果还查性别也相同大则如下:

   
   Select
   
    Name,sex,
   
   Count
   
   (
   
   *
   
   ) 
   
   From
   
    A 
   
   Group
   
    
   
   By
   
    Name,sex 
   
   Having
   
    
   
   Count
   
   (
   
   *
   
   ) 
   
   >
   
    
   
   1
   
   

   
   --
   
   ----------------------------------------------------------------------------------------------
   
   

   
   declare
   
    
   
   @max
   
    
   
   integer
   
   ,
   
   @id
   
    
   
   integer
   
   

   
   declare
   
    cur_rows 
   
   cursor
   
    local 
   
   for
   
    
   
   select
   
    主字段,
   
   count
   
   (
   
   *
   
   ) 
   
   from
   
    表名 
   
   group
   
    
   
   by
   
    主字段 
   
   having
   
    
   
   count
   
   (
   
   *
   
   ) 
   
   >
   
   ； 
   
   1
   
   

   
   open
   
    cur_rows

   
   fetch
   
    cur_rows 
   
   into
   
    
   
   @id
   
   ,
   
   @max
   
   

   
   while
   
    
   
   @@fetch_status
   
   =
   
   0
   
   

   
   begin
   
   

   
   select
   
    
   
   @max
   
    
   
   =
   
    
   
   @max
   
    
   
   -
   
   1
   
   

   
   set
   
    
   
   rowcount
   
    
   
   @max
   
   

   
   delete
   
    
   
   from
   
    表名 
   
   where
   
    主字段 
   
   =
   
    
   
   @id
   
   

   
   fetch
   
    cur_rows 
   
   into
   
    
   
   @id
   
   ,
   
   @max
   
   

   
   end
   
   

   
   close
   
    cur_rows

   
   set
   
    
   
   rowcount
   
    
   
   0
   
   

方法二
　　有两个意义上的重复记录，一是完全重复的记录，也即所有字段均重复的记录，二是部分关键字段重复的记录，比如Name字段重复，而其他字段不一定重复或都重复可以忽略。
　　
   
   1
   
   、对于第一种重复，比较容易解决，使用

   
   select
   
    
   
   distinct
   
    
   
   *
   
    
   
   from
   
    tableName
　　就可以得到无重复记录的结果集。
　　如果该表需要删除重复的记录（重复记录保留1条），可以按以下方法删除

   
   select
   
    
   
   distinct
   
    
   
   *
   
    
   
   into
   
    #Tmp 
   
   from
   
    tableName

   
   drop
   
    
   
   table
   
    tableName

   
   select
   
    
   
   *
   
    
   
   into
   
    tableName 
   
   from
   
    #Tmp

   
   drop
   
    
   
   table
   
    #Tmp
　　发生这种重复的原因是表设计不周产生的，增加唯一索引列即可解决。

　　
   
   2
   
   、这类重复问题通常要求保留重复记录中的第一条记录，操作方法如下
　　假设有重复的字段为Name,Address，要求得到这两个字段唯一的结果集

   
   select
   
    
   
   identity
   
   (
   
   int
   
   ,
   
   1
   
   ,
   
   1
   
   ) 
   
   as
   
    autoID, 
   
   *
   
    
   
   into
   
    #Tmp 
   
   from
   
    tableName

   
   select
   
    
   
   min
   
   (autoID) 
   
   as
   
    autoID 
   
   into
   
    #Tmp2 
   
   from
   
    #Tmp 
   
   group
   
    
   
   by
   
    Name,autoID

   
   select
   
    
   
   *
   
    
   
   from
   
    #Tmp 
   
   where
   
    autoID 
   
   in
   
   (
   
   select
   
    autoID 
   
   from
   
    #tmp2)
　　最后一个select即得到了Name，Address不重复的结果集（但多了一个autoID字段，实际写时可以写在select子句中省去此列）

   
   select
   
    
   
   *
   
    
   
   from
   
    tablename 
   
   where
   
    id 
   
   in
   
    (

   
   select
   
    id 
   
   from
   
    tablename 

   
   group
   
    
   
   by
   
    id 

   
   having
   
    
   
   count
   
   (id) 
   
   >
   
    
   
   1
   
   )
mms89757
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
SQL如何删除重复数据
qq_37705525的博客
05-17 5万+
SQL如何删除重复数据
sql删除表中重复记录_SQL从SQL表中删除重复行的不同方法
culuo4781的博客
07-22 1万+
sql删除表中重复记录 This article explains the process of performing SQL delete activity for duplicate rows from a SQL table. 本文介绍了对SQL表中的重复行执行SQL删除活动的过程。 介绍 (Introduction) We should follow cert...
SQL 删除重复记录，并保留其中一条
热门推荐
Ticking的专栏
02-12 1万+
SQL：删除重复数据，只保留一条用SQL语句,删除掉重复项只保留一条在几千条记录里,存在着些相同的记录,如何能用SQL语句,删除掉重复的呢 1、查找表中多余的重复记录，重复记录是根据单个字段（peopleId）来判断 select * from people where peopleId in (select peopleId from people group by peopleId havin...
SQL删除重复数据
程序员之道
05-02 2339
因为表的主键（id）是唯一的，所以只需要找到重复数据其中一条的主键（id），再通过主键（id）删除其他重复数据即可。
sql 删除表中的重复记录
12-16
本篇文章将深入探讨如何使用SQL语句来高效地删除这些重复的记录，特别是针对MySQL数据库的情况。 首先，我们需要识别出表中的重复记录。在给出的示例中，使用了以下SQL查询来查找`T_Dor_StructStar`表中结构SN(`...
Sql Server里删除数据表中重复记录的例子
09-10
在SQL Server中，删除数据表中的重复记录是一个常见的需求，特别是在数据清理和数据整合的过程中。以下将详细介绍三种在Sql Server中删除重复记录的方法。 **方法一：基于循环和临时表** 这种方法适用于没有主键...
SQL语句实现删除重复记录并只保留一条
09-10
这个查询会删除`peopleName`相同但`peopleId`不是最小的那个记录。 2. **基于多个字段**：如果重复判断基于多个字段，如`peopleId`和`seq`，可以这样操作： ```sql DELETE FROM vitae WHERE (peopleId, seq) ...
SQL语句实现删除ACCESS重复记录的两种方法
09-11
一种是**完全重复的记录**，这意味着所有字段的值都是相同的。例如，如果表中存在两条记录，它们的所有列值都一样，那么这两条记录就是完全重复的。处理这种情况的一个简单方法是使用`SELECT DISTINCT`语句，它会...
SQL Server2008中删除重复记录的方法分享
09-11
以下是一些在SQL Server 2008中删除重复记录的方法： 1. 常规方法： 这种方法基于子查询，通过找出同一字段（例如`Name`）有多个值的记录，并删除它们。具体的SQL语句如下： ```sql Delete From Employee ...
SQL查询重复语句，删除重复数据
BSX_null
07-16 7800
原创地址https://www.cnblogs.com/lanliying/p/5695349.html（不知道原创在哪 我是在他这里找的）在几千条记录里,存在着些相同的记录,如何能用SQL语句,删除掉重复的呢1、查找表中多余的重复记录，重复记录是根据单个字段（peopleId）来判断 select * from people where peopleId in (select peopleId ...
PostgreSQL 中如何解决因大量并发删除和插入操作导致的索引抖动？
技术笔记
07-17 845
索引抖动是 PostgreSQL 中一个常见的问题，它会对数据库的性能产生严重的影响。通过采用批量操作、分区表、索引优化和调整数据库参数等方法，我们可以有效地解决索引抖动问题，提高数据库的性能和稳定性。在实际应用中，我们应该根据具体情况选择合适的解决方案，并不断地进行优化和调整，以满足业务的需求。解决索引抖动问题就像是一场战斗，我们需要根据敌人（问题）的特点和弱点，选择合适的武器（解决方案），并灵活运用战术（优化方法），才能取得最终的胜利。
接口开发：Orcal数据库的批量新增sql
qq_65032048的博客
07-17 784
场景：在日常的CURD中一定会用到批量新增。在我们的项目中，使用的数据库是Orcal，由于之前基本都是使用Mysql的，使用的sql语句也基本都是用mysql的。但是在这次的接口编写时用mysql的批量新增出了问题，刚开始我还以为是写的动态sql有问题，在后续的问题修改也主要是对动态sql修改，因此也浪费了大量的时间，在后续把sql搬到数据库运行一下后才发现是sql的问题，同时也了解到了mysql和orcal 也是有很多地方是不同的。
SQL执行流程、SQL执行计划、SQL优化
风中的默默
07-19 297
返回两个表中的匹配行。返回左表中的所有记录以及右表中的匹配记录。返回右表中的所有记录以及左表中的匹配记录。返回左侧或右侧表中有匹配的所有记录。
SQL每日一题：查找重复的电子邮箱
xiongxiaoxuan的博客
07-17 362
编写解决方案来报告所有重复的电子邮件。请注意，可以保证电子邮件字段不为 NULL。以 任意顺序 返回结果表。按照email分组计数，筛选出数量>1的email。(需注意分组计数时一定要记得用group by)此表的每一行都包含一封电子邮件。电子邮件不包含大写字母。id 是该表的主键（具有唯一值的列）。
SQL Server报告服务的艺术：在SSRS中打造专业报告
最新发布
2401_85760095的博客
07-20 639
SQL Server Reporting Services是一个全面的报告解决方案，它允许从各种数据源生成复杂的交互式和移动友好的报告。SSRS包括一个集成的开发环境，用于设计报告，以及一个部署环境，用于发布和共享报告。
sqlalchemy定期保持mysql连接活跃
ithongchou的博客
07-18 1446
数据库时，确保保持活跃连接是很重要的，特别是在长时间不使用数据库连接时。使用连接池管理数据库连接。通过配置合适的连接池参数可以有效地保持活跃连接。，以保持连接的活跃状态。这可以通过任务调度库如。（超出连接池大小时允许创建的额外连接数）和。（连接在被放回连接池前的最大生存时间）等。查询，保持数据库连接的活跃状态。可以定期执行简单的查询，例如。这个例子会每隔一段时间执行。
sql删除重复id保留唯一
04-28
可以使用以下 SQL 语句删除重复 id，保留唯一： ``` DELETE FROM table_...这条 SQL 语句的作用是，删除表中除了每组相同 `column_name` 值中的最小 `id` 外的所有记录，从而保留每组 `column_name` 值的唯一记录。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值