MYSQL删除重复数据

  mysql 删除表中重复记录。

例子：
CREATE TABLE `student` (
`id` BIGINT(20) NOT NULL AUTO_INCREMENT COMMENT '非业务主键',
`name` VARCHAR(30) NULL DEFAULT NULL,
`age` INT(11) NULL DEFAULT '0',
PRIMARY KEY (`id`)
)

表中name字段存在重复，解决思路首先是如何找到重复的记录然后将其删除；或者用逆向思维，找到要保留的数据，将剩下的数据删除。

一般有两个方法：
1. 是用中间表来实现

     1） 使用 create table like 复制出来一个中间表 ，然后用insert into select 把不重复的数据导入到中间表中，然后再用中间表替代旧表。 具体实现如下：
   create table tmp_users like users;
   Insert into tmp_users select min(`id`), `name`   from users group by name ;
   drop   table  users   ;
   alter   table   tmp_users  rename  users;

     2） 使用 create table select 直接复制出来一个含有不重复数据的中间表，清除中间表的数据， 然后中间表数据复制到旧表。具体实现如下：
    create table tmp_student select min(id), name ,age  from student group by name ;
   truncate table student;
   insert into student select * from tmp_student;
   drop table tmp_student ;

以上两种方法的区别就是 create table like  和 create table select 的区别 ，create table like 复制的表结构包含索引而 create table select 不包含索引，没有索引对业务影响很大，这个要特别留意的。还有就是create table like  和 create table select  复制的表没有把表的权限给copy过来。要事后从新设置下。数据量大的时候应该选择 create table select ，先倾倒数据事后再为表建立索引。

至于用中间表的数据更新旧表的策略，要么用drop旧表再rename中间表。要么清空旧表数据再导入中间表数据。数据量大的时候前面方法效率较高。

2. 用一条sql语句来实现

   1）找到要删除的数据然后删除这些数据。具体实现如下，

      delete student as a from student as a,(
          select min(id) as id, name from student  group by name having count(name) > 1
      ) as b
      where a.name = b.name and a.id <> b.id;

      加上 having count(name) > 1 可以避免扫描没有重复的记录，提高效率

   2）找到要保留的数据 然后用not in 来删除不再这些数据中的记录。大家很容易就想到如下的sql语句：
      delete from users where id not in ( select min(id)  from users group by name ); 但是mysql删  除动作不能带有本表的查询动作，意思是你删除users表的东西不能以users表的信息为条件所以这个语句会报错，执行不了。只要通过创建临时表作为查询条件。具体实现如下：
delete from student  where  id not in (select min(id) from student  group by name );  不行
delete from student where id not in ( select * from ( select min(id)  from student group by name ) );不行

delete from student where id not in ( select * from ( select min(id)  from student  group by name ) as t  );  必须这样才行。。