SQL去重查询
在大型的项目中,往往是多个部门间相互配合开发完成一个项目。这就不可避免地存在数据在部门间相互传递。而这些数据大部分是业务人员提供的,可能存在着一些错误,尤其是一些作为主键的数据,必须要遵守唯一性约定。所以我们先将Excel表中的数据复制到数据库表中,进行数据的去重筛选。这一步在开发中非常重要,避免折腾很久才发现是数据的问题。
以组织架构表为例,部门编码唯一(主键),上级部门编码,部门名称(唯一)。
1.单个字段去重查询
部门编码去重查询,删除或修改重复数据,以保证数据的唯一性。
select * from department where departmentcode in( select departmentcode from department group by departmentcode having count(departmentcode)>1) order by departmentcode;
这样就可以把部门编码相同的数据查出来,对具体数据作出修改。
2.单个字段相同,另一个字段不同
部门编码相同,部门名称不同.这样可以查出同一个部门编码,对应多个部门名称的数据。
select * from department t1 inner join department t2 on t1.departmentcode = t2.departmentcode and t1.departmentname <> t2.departmentname order by t1.departmentcode