Mysql删除多余的重复记录 有时候,数据库里会有多条重复记录。这个时候需要去重,也就是,多条重复记录只保留一条。。。 尤其在数据仓库中,因为一些人为的原因,甚至疏忽,尤为常见。 如何去重呢? 步骤如下: 1. 查询出重复的记录 ? CREATE TABLE push_log_fu
Mysql删除多余的重复记录
有时候,数据库里会有多条重复记录。这个时候需要去重,也就是,多条重复记录只保留一条。。。
尤其在数据仓库中,因为一些人为的原因,甚至疏忽,尤为常见。
如何去重呢?
步骤如下:
1.
查询出重复的记录
?
CREATE TABLE push_log_full_2013_10_30_tmp
SELECT * FROM `push_log_full`
WHERE time BETWEEN FROM_DAYS(TO_DAYS(NOW()) - 1) AND FROM_DAYS(TO_DAYS(NOW()))
AND (imsi, andriodid, time) IN (
SELECT imsi, andriodid, time FROM `push_log_full`
WHERE time BETWEEN FROM_DAYS(TO_DAYS(NOW()) - 1) AND FROM_DAYS(TO_DAYS(NOW()))
GROUP BY imsi, andriodid, time
HAVING COUNT(*) > 1)
?将重复的记录查出来放到一张临时表里面去。
?
2
删除push_log_full表中的重复数据。
3
将临时表的数据重新导入到push_log_full中。
?
?
通过以上三个步骤就实现了重复记录的去重。