MySQL 8运行ALTER IGNORE TABLE报错如何实现去重同时建唯一索引

MySQL 5.7及后续所有版本（包含MySQL 8.x 商业版、社区版）已经正式移除了ALTER IGNORE TABLE语法，因此执行旧语法会抛出1064语法错误，无法直接通过单条SQL实现「删除重复数据+创建唯一索引」的需求，可通过以下两种方案实现同等效果。

1. 先查询重复数据，确认重复范围：

SELECT field1, field12, field3, MIN(id) AS keep_id, COUNT(*) AS duplicate_count
FROM tablex
GROUP BY field1, field12, field3
HAVING duplicate_count > 1;

2. 删除重复数据，以下示例保留每个重复组中id最小的行，如需保留id最大的行，将条件中的t1.id > t2.id改为t1.id < t2.id即可：

DELETE t1
FROM tablex t1
JOIN tablex t2 
  ON t1.field1 = t2.field1 
  AND t1.field12 = t2.field12 
  AND t1.field3 = t2.field3 
  AND t1.id > t2.id;

如果表数据量较大，可添加LIMIT分批删除，避免长时间锁表：

DELETE t1
FROM tablex t1
JOIN tablex t2 
  ON t1.field1 = t2.field1 
  AND t1.field12 = t2.field12 
  AND t1.field3 = t2.field3 
  AND t1.id > t2.id
LIMIT 1000;
-- 循环执行上述语句，直到返回的影响行数为0即可

3. 重复数据清理完成后，正常创建唯一索引：

ALTER TABLE tablex
ADD UNIQUE INDEX id_rmd (field1, field12, field3);

该方案通过新表预加索引+插入去重的方式实现，整体对业务的影响时间更短：

1. 创建和原表结构完全一致的空表：

CREATE TABLE tablex_new LIKE tablex;

2. 提前给新表添加唯一索引：

ALTER TABLE tablex_new
ADD UNIQUE INDEX id_rmd (field1, field12, field3);

3. 插入原表数据，重复行会自动被忽略：

INSERT IGNORE INTO tablex_new SELECT * FROM tablex;

4. 校验新表数据无误后，原子替换原表：

RENAME TABLE tablex TO tablex_old, tablex_new TO tablex;

5. 确认业务运行正常后，可删除备份的旧表：

DROP TABLE tablex_old;

• 所有操作前务必先对原表做全量备份，避免误删数据无法恢复
• 生产环境操作建议选择业务低峰期执行，避免表锁影响正常业务请求
• 表数据量较大时，删除/插入操作可分批执行，减少单次操作的锁定时长

内容的提问来源于stack exchange，提问作者Omari Victor Omosa