mySql数据重复数据去重
1、问题来源:数据中由于并发问题,数据存在多次调用接口,插入了重复数据,需要根据多条件删除重复数据;
2、参考博客文章地址:https://www.cnblogs.com/jiangxiaobo/p/6589541.html
二、
1、删除数据之前,先要查找到重复的数据,有一张单位表,单位名称可以重复,但是在不同组织id下不能重复(多条件计数重复数据),统计一下重复的数据
根据条件进行数据统计,然后选出记录数大于1的记录,看一下哪些数据是重复的数据:
SELECT count( company_name ) countNum, company_name, org_id FROM company GROUP BY company_name, org_id HAVING countNum > 1 ORDER BY countNum DESC
查询结果
2、删除重复数据:根据数据查询出的条件筛选出重复数据的id,然后将id最小的排除掉,然后删除这些重复数据,中间由于数据库版本的问题,不能直接在查询表的数据删除数据
所以需要将查询的重复的记录作为一个子查询,起一个别名,然后再进行删除
delete from company WHERE id in ( SELECT t.id FROM ( select id FROM company a WHERE (a.company_name, a.org_id) IN ( SELECT company_name, org_id FROM company GROUP BY company_name, org_id HAVING count(*) > 1 ) AND id NOT IN ( SELECT min(id) FROM company GROUP BY company_name, org_id HAVING count(*) > 1 )) t)
若有侵权请联系作者,所有内容仅代表个人认知观点,如有错误,欢迎校正;
邮箱:644304139@qq.com
博客地址:https://www.cnblogs.com/liweiweicode/