在MySQL中，查找和处理重复数据是数据库维护的常见需求。通常我们会根据某一个或多个字段判断是否存在重复记录，并进行去重或标记操作。以下是常用的SQL语句方法，帮助你快速定位并处理重复数据。
查找重复数据
假设有一张用户表 users，包含字段 id、name 和 email，我们想找出基于 email 字段的重复记录。
-- 查找 email 重复的记录条数
SELECT email, COUNT(*) AS count FROM users GROUP BY email HAVING count > 1;
-- 查看所有重复 email 的完整记录
SELECT FROM users WHERE email IN (SELECT email FROM users GROUP BY email HAVING COUNT() > 1) ORDER BY email;
如果你需要根据多个字段判断重复（例如 name 和 email 同时相同），可以这样写：
SELECT name, email, COUNT(*) FROM users GROUP BY name, email HAVING COUNT(*) > 1;删除重复数据保留一条
在查出重复数据后，通常希望只保留一条，删除其余重复项。可以通过以下方式实现。
-- 使用自连接删除重复（保留 id 最小的一条）
DELETE u1 FROM users u1, users u2 WHERE u1.email = u2.email AND u1.id > u2.id;
这条语句的意思是：当两个记录 email 相同，但 u1 的 id 大于 u2 时，删除 u1。最终每个 email 只保留 id 最小的那条记录。
注意：执行删除操作前建议先备份数据，避免误删。
标记重复数据
如果不急于删除，可以先添加一个字段标记哪些是重复的。
-- 添加标记字段
ALTER TABLE users ADD COLUMN is_duplicate BOOLEAN DEFAULT FALSE;
-- 将非最小 id 的重复记录标记为 true
UPDATE users u1 INNER JOIN (SELECT email, MIN(id) AS min_id FROM users GROUP BY email HAVING COUNT(*) > 1) dup ON u1.email = dup.email SET u1.is_duplicate = TRUE WHERE u1.id != dup.min_id;
这样就可以在不影响数据的前提下，识别出哪些是重复项，后续可人工审核或批量处理。
防止未来出现重复数据
最好的方式是通过数据库约束来避免重复数据产生。
-- 添加唯一索引（确保 email 唯一）
ALTER TABLE users ADD UNIQUE INDEX idx_email_unique (email);
如果允许 null 值多次出现，但非空值不能重复，该索引依然有效。插入重复 email 时会报错，从而阻止重复数据写入。
基本上就这些常用操作。查找用 GROUP BY + HAVING，删除用自连接或子查询，预防靠唯一索引。不复杂但容易忽略细节，尤其是删除时要确认保留逻辑正确。
