mysql去除重复数据
需求描述
doc表有很多重复的title,想去除掉重复的记录
表结构
CREATE TABLE doc (id INT PRIMARY KEY,title VARCHAR(255),content TEXT
);
去重SQL
-- 创建临时表
CREATE TEMPORARY TABLE temp_doc AS
SELECT * FROM doc
WHERE 1=0;-- 插入唯一的记录（每个title最小的id）
INSERT INTO temp_doc
SELECT *
FROM doc d
WHERE id IN (SELECT MIN(id)FROM docGROUP BY title
);-- 删除原始表中的所有记录
DELETE FROM doc;-- 将临时表中的记录插入回原始表中
INSERT INTO doc
SELECT * FROM temp_doc;-- 删除临时表
DROP TEMPORARY TABLE temp_doc;
查看是否有重复的记录
SELECT id, title, COUNT(*)
FROM doc
GROUP BY title
ORDER BY COUNT(*) DESC;