MySQL 数据库中删除重复记录的方法总结

最新推荐文章于 2024-08-28 08:50:29 发布
最新推荐文章于 2024-08-28 08:50:29 发布
阅读量1.8k 收藏
点赞数
分类专栏： 数据库

演示数据

表结构：

1
2
3
4
5
6
7
8
mysql> desc demo;
+ -------+------------------+------+-----+---------+----------------+
| Field | Type             | Null | Key | Default | Extra          |
+ -------+------------------+------+-----+---------+----------------+
| id    | int (11) unsigned | NO   | PRI | NULL    | auto_increment |
| site  | varchar (100)     | NO   | MUL |         |                |
+ -------+------------------+------+-----+---------+----------------+
2 rows in set (0.00 sec)

数据：

1
2
3
4
5
6
7
8
9
10
11
mysql> select * from demo order by id;
+ ----+------------------------+
| id | site                   |
+ ----+------------------------+
|  1 | http://www.CodeBit.cn  |
|  2 | http://YITU.org        |
|  3 | http://www.ShuoWen.org |
|  4 | http://www.CodeBit.cn  |
|  5 | http://www.ShuoWen.org |
+ ----+------------------------+
5 rows in set (0.00 sec)

当没有创建表或创建索引权限的时候，可以用下面的方法：

如果你要删除较旧的重复记录，可以使用下面的语句：

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
mysql> delete from a
     -> using demo as a, demo as b
     -> where (a.id > b.id)
     -> and (a.site = b.site);
Query OK, 2 rows affected (0.12 sec)
 
mysql> select * from demo order by id;
+ ----+------------------------+
| id | site                   |
+ ----+------------------------+
|  1 | http://www.CodeBit.cn  |
|  2 | http://YITU.org        |
|  3 | http://www.ShuoWen.org |
+ ----+------------------------+
3 rows in set (0.00 sec)

如果你要删除较新的重复记录，可以使用下面的语句：

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
mysql> delete from a
     -> using demo as a, demo as b
     -> where (a.id < b.id)
     -> and (a.site = b.site);
Query OK, 2 rows affected (0.12 sec)
 
mysql> select * from demo order by id;
+ ----+------------------------+
| id | site                   |
+ ----+------------------------+
|  2 | http://YITU.org        |
|  4 | http://www.CodeBit.cn  |
|  5 | http://www.ShuoWen.org |
+ ----+------------------------+
3 rows in set (0.00 sec)

你可以用下面的语句先确认将被删除的重复记录：

1
2
3
4
5
6
7
8
9
10
11
mysql> SELECT a.*
     -> FROM demo a, demo b
     -> WHERE a.id > b.id
     -> AND (a.site = b.site);
+ ----+------------------------+
| id | site                   |
+ ----+------------------------+
|  1 | http://www.CodeBit.cn  |
|  3 | http://www.ShuoWen.org |
+ ----+------------------------+
2 rows in set (0.00 sec)

如果有创建索引的权限，可以用下面的方法：

在表上创建唯一键索引：

1
2
3
4
5
6
7
8
9
10
11
12
13
mysql> alter ignore table demo add unique index ukey (site);
Query OK, 5 rows affected (0.46 sec)
Records: 5  Duplicates: 2  Warnings: 0
 
mysql> select * from demo order by id;
+ ----+------------------------+
| id | site                   |
+ ----+------------------------+
|  1 | http://www.CodeBit.cn  |
|  2 | http://YITU.org        |
|  3 | http://www.ShuoWen.org |
+ ----+------------------------+
3 rows in set (0.00 sec)

重复记录被删除后，如果需要，可以删除索引：

1
2
3
mysql> alter table demo drop index ukey;
Query OK, 3 rows affected (0.37 sec)
Records: 3  Duplicates: 0  Warnings: 0

如果有创建表的权限，可以用下面的方法：

创建一个新表，然后将原表中不重复的数据插入新表：

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
mysql> create table demo_new as select * from demo group by site;
Query OK, 3 rows affected (0.19 sec)
Records: 3  Duplicates: 0  Warnings: 0
 
mysql> show tables;
+ ----------------+
| Tables_in_test |
+ ----------------+
| demo           |
| demo_new       |
+ ----------------+
2 rows in set (0.00 sec)
 
mysql> select * from demo order by id;
+ ----+------------------------+
| id | site                   |
+ ----+------------------------+
|  1 | http://www.CodeBit.cn  |
|  2 | http://YITU.org        |
|  3 | http://www.ShuoWen.org |
|  4 | http://www.CodeBit.cn  |
|  5 | http://www.ShuoWen.org |
+ ----+------------------------+
5 rows in set (0.00 sec)
 
mysql> select * from demo_new order by id;
+ ----+------------------------+
| id | site                   |
+ ----+------------------------+
|  1 | http://www.CodeBit.cn  |
|  2 | http://YITU.org        |
|  3 | http://www.ShuoWen.org |
+ ----+------------------------+
3 rows in set (0.00 sec)

然后将原表备份，将新表重命名为当前表：

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
mysql> rename table demo to demo_old, demo_new to demo;
Query OK, 0 rows affected (0.04 sec)
 
mysql> show tables;
+ ----------------+
| Tables_in_test |
+ ----------------+
| demo           |
| demo_old       |
+ ----------------+
2 rows in set (0.00 sec)
 
mysql> select * from demo order by id;
+ ----+------------------------+
| id | site                   |
+ ----+------------------------+
|  1 | http://www.CodeBit.cn  |
|  2 | http://YITU.org        |
|  3 | http://www.ShuoWen.org |
+ ----+------------------------+
3 rows in set (0.00 sec)

注意：使用这种方式创建的表会丢失原表的索引信息！

1
2
3
4
5
6
7
8
mysql> desc demo;
+ -------+------------------+------+-----+---------+-------+
| Field | Type             | Null | Key | Default | Extra |
+ -------+------------------+------+-----+---------+-------+
| id    | int (11) unsigned | NO   |     | 0       |       |
| site  | varchar (100)     | NO   |     |         |       |
+ -------+------------------+------+-----+---------+-------+
2 rows in set (0.00 sec)

如果要保持和原表信息一致，你可以使用 show create table demo; 来查看原表的创建语句，然后使用原表的创建语句创建新表，接着使用 insert … select 语句插入数据，再重命名表即可。

当然，如果要避免重复记录，最好的办法还是不要插入重复数据，可以参考本站另外一篇文章：MySQL 当记录不存在时插入（insert if not exists） 。

MySQL 数据库技巧：删除重复记录
SrySmalltalk的博客
09-24 236
在本文中，我们将以一个名为 “employees” 的表为例，该表包含以下字段：id、name 和 email。本文将为您介绍在 MySQL 数据库中删除重复记录的方法，并提供相应的源代码示例。这条 SQL 语句使用子查询来选择每个 email 值中的最小 id 值，并将其他具有相同 email 值的记录删除。一旦我们确定了重复的记录，就可以开始删除它们。该查询将返回所有重复的 email 值以及它们的重复次数。完成上述步骤后，重复的记录将被成功删除，只保留每个 email 值的一条记录。
删除mysql数据库中的重复数据记录
12-15
以下是一个具体的步骤，演示如何在MySQL中删除重复的数据记录，特别是针对`test`数据库中`title`字段的重复记录。 首先，创建一个临时表`bak`，用于存储不重复的记录。这里使用的SQL语句是： ```sql CREATE TABLE ...
MySQL 删除重复数据
weixin_30664051的博客
08-15 101
昨天遇到一个问题，就是需要删掉一个表里的重复数据，还有就是希望这个表的ID能够连续，因为一旦删掉重复记录，作为自增主键的ID就会不连续了，所以就要想办法搞定 表中数据： 我想要把名字重复的去掉，但是还希望ID能够连续。 首先是将数据库里边的重复记录删掉，我看网上有好多答案是这样的： 1 delete from people 2 where peopleId in (select...
MySQL数据库中删除重复记录的方法总结[推荐]
larry_lv的专栏
02-16 530
表结构： mysql> desc demo; +-------+------------------+------+-----+---------+----------------+ | Field | Type | Null | Key | Default | Extra | +-------+------------------+------+-----+---------+-
mysql 删除重复数据
Eaphy's Blog
03-20 678
假设有 student 表一张， 有 id 、name 两个字段，name 一样即重复 。 一、查询是否有重复数据 SELECT name,count(*) from student GROUP BY `name` HAVING COUNT(*)&gt;1; 二、删除重复数据 DELETE a FROM student a JOIN ( SELECT ...
MySQL 删除数据库中重复数据方法小结
12-15
在MySQL数据库管理中，删除重复数据是一个常见的需求，特别是在数据清洗和数据整理的过程中。然而，直接使用简单的SQL语句往往无法解决这个问题，因为MySQL对于某些特定的更新操作有限制。以下是一些删除数据库中...
mysql删除重复的数据库_MySQL数据库中删除重复记录的方法总结[推荐]
weixin_39902345的博客
01-18 89
表结构：mysql> desc demo;+-------+------------------+------+-----+---------+----------------+| Field | Type | Null | Key | Default | Extra |+-------+------------------+------+-----+---------+----------...
【mysql】删除重复数据
Try My Best 尽力而为
04-09 172
最近因为发现数据库中的表有脏数据，需要维护。这些脏数据就是重复数据，需要将其删除。 可能因为你在建表的时候考虑欠佳，需要为表里面的几个字段建立一个（联合）唯一索引，但是没有建立，而由于不止一个写的程序在往表里面insert数据，造成数据的重复~~ 现在需要删除这些重复数据，看了看网上前辈们写的例子，大多数不能用，rowid也出来了，而mysql中是没有rowid的。   现假设有一张t...
MySQL中如何删除重复数据？
最新发布
初学者
08-28 1426
在MySQL中删除重复数据是一个常见的需求，特别是在处理大型数据库时。删除重复数据可以通过多种方式实现，具体方法取决于你的具体需求和数据库的结构。以下是一些常见的方法。
MySQL中查询、删除重复记录的方法大全
贾维斯的博客
09-05 1211
MySQL中查询、删除重复记录的方法大全   mysql中删除重复记录的方法有很多种，下面这篇文章主要给大家总结了在MySQL中查询、删除重复记录的方法大全，文中给出了详细的示例代码供大家参考学习，需要的朋友下面来一起看看吧。 前言 本文主要给大家介绍了关于MySQL中查询、删除重复记录的方法，分享出来供大家参考学习，下面来看看详细的介绍： 查找所有重复标题的记录： select ti...
Mysql——删除数据库中的重复记录
CSDN博客
05-19 250
&#13; 查找数据库中的重复记录（多个字段）：&#13; SELECT * FROM wcs_best_fitness_individual WHERE (spokeCounts,isSpokeClosure,deflectionAngleOne,deflectionAngleTwo) IN &#13; (SELECT spokeCounts,isSpokeClosu...
MYSQL删除重复数据
yj_2006hn的专栏
03-14 826
mysql 删除表中重复记录。 例子： CREATE TABLE `student` ( `id` BIGINT(20) NOT NULL AUTO_INCREMENT COMMENT '非业务主键', `name` VARCHAR(30) NULL DEFAULT NULL, `age` INT(11) NULL DEFAULT '0', PRIMARY KEY (`id`)
Mysql删除重复数据
一切简单化
08-22 384
语法： DELETE FROM 表名 WHERE id NOT IN ( SELECT temp.min_id FROM ( SELECT MIN(id) min_id FROM 表名 GROUP BY 字段名 )AS temp ); 备注：id：也是表字段 实例： DELETE F...
MySQL删除重复记录的高效方法
本文主要介绍了在MySQL数据库中如何删除重复记录的方法，提供了两种不同的SQL语句实现方式，并给出了几个查询和删除重复记录的实例。 在MySQL中，有时我们需要清理数据表，确保每个记录的特定字段组合是唯一的。...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值