第31章 MySQL 处理重复数据教程

有些 MySQL 数据表中可能存在重复的记录，有些情况咱们允许重复数据的存在，但有时候咱们也需要删除这些重复的数据。

本章节咱们将为大家介绍如何防止数据表出现重复数据及如何删除数据表中的重复数据。

---

防止表中出现重复数据

足下可以在 MySQL 数据表中设置指定的字段为 PRIMARY KEY（主键） 或者 UNIQUE（唯一） 索引来保证数据的唯一性。

让咱们尝试一个实例：下表中无索引及主键，所以该表允许出现多条重复记录。

    CREATE TABLE person_tbl
    (
        first_name CHAR(20),
        last_name CHAR(20),
        sex CHAR(10)
    );

如果足下想设置表中字段 first_name，last_name 数据不能重复，足下可以设置双主键模式来设置数据的唯一性， 如果足下设置了双主键，那么那个键的默认值不能为 NULL，可设置为 NOT NULL。如下所示：

    CREATE TABLE person_tbl
    (
       first_name CHAR(20) NOT NULL,
       last_name CHAR(20) NOT NULL,
       sex CHAR(10),
       PRIMARY KEY (last_name, first_name)
    );

如果咱们设置了唯一索引，那么在插入重复数据时，SQL 语句将无法执行成功,并抛出错。

INSERT IGNORE INTO 与 INSERT INTO 的区别就是 INSERT IGNORE INTO 会忽略database中已经存在的数据，如果database没有数据，就插入新的数据，如果有数据的话就跳过这条数据。这样就可以保留database中已经存在数据，达到在间隙中插入数据的目的。

以下实例使用了 INSERT IGNORE INTO，执行后不会出错，也不会向数据表中插入重复数据：

    mysql> INSERT IGNORE INTO person_tbl (last_name, first_name)
        -> VALUES( 'Jay', 'Thomas');
    Query OK, 1 row affected (0.00 sec)
    mysql> INSERT IGNORE INTO person_tbl (last_name, first_name)
        -> VALUES( 'Jay', 'Thomas');
    Query OK, 0 rows affected (0.00 sec)

INSERT IGNORE INTO 当插入数据时，在设置了记录的唯一性后，如果插入重复数据，将不return 错误，只以警告形式return 。 而 REPLACE INTO 如果存在 primary 或 unique 相同的记录，则先删除掉。再插入新记录。

另一种设置数据的唯一性方法是添加一个 UNIQUE 索引，如下所示：

    CREATE TABLE person_tbl
    (
       first_name CHAR(20) NOT NULL,
       last_name CHAR(20) NOT NULL,
       sex CHAR(10),
       UNIQUE (last_name, first_name)
    );

---

统计重复数据

以下咱们将统计表中 first_name 和 last_name的重复记录数：

    mysql> SELECT COUNT(*) as repetitions, last_name, first_name
        -> FROM person_tbl
        -> GROUP BY last_name, first_name
        -> HAVING repetitions > 1;

以上查询语句将return person_tbl 表中重复的记录数。 一般情况下，查询重复的值，请执行以下操作：

• 确定哪一列包含的值可能会重复。
• 在列选择列表使用COUNT(*)列出的那些列。
• 在GROUP BY子句中列出的列。
• HAVING子句设置重复数大于1。

---

过滤重复数据

如果足下需要读取不重复的数据可以在 SELECT 语句中使用 DISTINCT 关键字来过滤重复数据。

    mysql> SELECT DISTINCT last_name, first_name
        -> FROM person_tbl;

足下也可以使用 GROUP BY 来读取数据表中不重复的数据：

    mysql> SELECT last_name, first_name
        -> FROM person_tbl
        -> GROUP BY (last_name, first_name);

---

删除重复数据

如果足下想删除数据表中的重复数据，足下可以使用以下的SQL语句：

    mysql> CREATE TABLE tmp SELECT last_name, first_name, sex FROM person_tbl  GROUP BY (last_name, first_name, sex);
    mysql> DROP TABLE person_tbl;
    mysql> ALTER TABLE tmp RENAME TO person_tbl;

当然足下也可以在数据表中添加 INDEX（索引） 和 PRIMAY KEY（主键）这种简单的方法来删除表中的重复记录。方法如下：

    mysql> ALTER IGNORE TABLE person_tbl
        -> ADD PRIMARY KEY (last_name, first_name);

本专栏所有文章

第1章 MySQL 教程	第2章 MySQL 安装教程
第3章 MySQL 管理教程	第4章 MySQL PHP 语法教程
第5章 MySQL 连接教程	第6章 MySQL 创建数据库教程
第7章 MySQL 删除数据库教程	第8章 MySQL 选择数据库教程
第9章 MySQL 数据类型教程	第10章 MySQL 创建数据表教程
第11章 MySQL 删除数据表教程	第12章 MySQL 插入数据教程
第13章 MySQL 查询数据教程	第14章 MySQL WHERE 子句教程
第15章 MySQL UPDATE 更新教程	第16章 MySQL DELETE 语句教程
第17章 MySQL LIKE 子句教程	第18章 MySQL UNION教程
第19章 MySQL 排序教程	第20章 MySQL 分组教程
第21章 MySQL 连接的使用教程	第22章 MySQL NULL 值处理教程
第23章 MySQL 正则表达式教程	第24章 MySQL 事务教程
第25章 MySQL ALTER命令教程	第26章 MySQL 索引教程
第27章 MySQL 临时表教程	第28章 MySQL 复制表教程
第29章 MySQL 元数据教程	第30章 MySQL 序列使用教程
第31章 MySQL 处理重复数据教程	第32章 MySQL 及 SQL 注入教程
第33章 MySQL 导出数据教程	第34章 MySQL 导入数据教程
第35章 MySQL 函数教程	第36章 MySQL 运算符教程

寄语

本文有榴莲酱CSDN原创，欢迎点赞、转载，博客地址：https://blog.csdn.net/qq441540598

• 不要感叹人生苦短。拾起梦想的种子，用生命的时间的每一分钟去耕耘，你会发现，你的生活，其实很精彩、很充实。
• 佛说，苦非苦，乐非乐，只是一时的执念而已。执于一念，将受困于一念；一念放下，会自在于心间。物随心转，境由心造，烦恼皆由心生。有些人，有些事，是可遇不可求的，强求只有痛苦。既然这样，就放宽心态，顺其自然。无论何时何地，都要拥有一颗安闲自在的心，不让自己活得累。
• 荐能举贤精选良材担重任，择优拔萃广开学路育英才。
• 这个世界上没有一个人的成功，成功都是与人分享的；这个世界上没有两个人的病痛，病痛是无法与人分享的。
• 一个人从出生，她的背景就已经决定了她一半的命运。在青春年少的时候我们都挣扎过，认为生命会赐予你辉煌的未来，可最终还是被现实打败了。