通过唯一约束预防重复，如ALTER TABLE添加UNIQUE索引；2. 使用GROUP BY和COUNT识别重复数据；3. 借助DELETE JOIN或临时表删除重复并保留一条；4. 用INSERT IGNORE或ON DUPLICATE KEY UPDATE避免插入时重复，根据场景灵活选择方法。
处理重复数据是MySQL数据库维护中的常见需求。核心思路包括预防重复、识别重复以及清除重复。以下是具体方法。
使用唯一约束防止重复
在设计表结构时，通过添加唯一索引或主键约束，可有效阻止重复数据的插入。
例如，确保用户邮箱不重复：ALTER TABLE users ADD UNIQUE INDEX uk_email (email);
此后插入相同email的数据会报错，从而保障数据唯一性。
查询并识别重复数据
若表中已存在重复记录，可通过分组和计数找出它们。
比如查找email字段的重复项：SELECT email, COUNT(*) FROM users GROUP BY email HAVING COUNT(*) > 1;
这条语句列出所有出现次数大于1的email，便于后续处理。
删除重复数据保留一条
在不影响业务的前提下，可删除多余重复行，仅保留一条。
常用方法是根据自增ID保留最小或最大的那条：DELETE t1 FROM users t1 INNER JOIN users t2 WHERE t1.id > t2.id AND t1.email = t2.email;
该语句删除email相同但ID较大的记录，实现去重。
若无合适ID，可借助临时表：- 将去重后的数据（如用DISTINCT或GROUP BY）导入临时表
- 清空原表
- 将临时表数据写回
插入时避免重复
执行INSERT操作时，可用以下方式处理潜在重复：
- INSERT IGNORE：跳过导致唯一冲突的行
- ON DUPLICATE KEY UPDATE：更新已存在的行而非报错
INSERT INTO users (email, name) VALUES ('a@b.com', 'Alice') ON DUPLICATE KEY UPDATE name=VALUES(name);
这条语句在email冲突时更新name字段，避免插入失败。
基本上就这些。关键是根据场景选择预防还是清理，结合约束与查询语句灵活处理。
