求高效SQL脚本：识别并补全缺失REC_STRING=LMT3的RECORD_ID记录

这个需求我之前处理过类似的，核心是先精准定位所有未包含REC_STRING=LMT3的唯一RECORD_ID，再批量插入对应记录，绝对别搞逐行循环操作，那样太拖性能了。下面分步骤给你主流数据库的实现方案：

核心思路 #

1. 提取数据表中所有唯一的RECORD_ID
2. 排除那些已经存在REC_STRING=LMT3的RECORD_ID，得到需要补全的ID集合
3. 批量为这些ID插入RECORD_ID + LMT3的记录

具体数据库实现 #

PostgreSQL/MySQL 8.0+（支持CTE语法） #

用公共表表达式（CTE）先筛选缺失ID，再批量插入，代码简洁且性能优异：

WITH missing_ids AS (
    -- 取所有唯一RECORD_ID，减去已有LMT3的ID
    SELECT DISTINCT RECORD_ID
    FROM your_table
    EXCEPT
    SELECT RECORD_ID
    FROM your_table
    WHERE REC_STRING = 'LMT3'
)
INSERT INTO your_table (RECORD_ID, REC_STRING)
SELECT RECORD_ID, 'LMT3'
FROM missing_ids;

EXCEPT会自动去重，比嵌套子查询更直观，配合索引能快速完成筛选。

MySQL 5.x（不支持CTE） #

用左连接（LEFT JOIN）筛选匹配不到的缺失ID，兼容旧版本：

INSERT INTO your_table (RECORD_ID, REC_STRING)
SELECT DISTINCT t.RECORD_ID, 'LMT3'
FROM your_table t
LEFT JOIN your_table t2 
    ON t.RECORD_ID = t2.RECORD_ID 
    AND t2.REC_STRING = 'LMT3'
WHERE t2.RECORD_ID IS NULL;

LEFT JOIN + IS NULL是经典的缺失值筛选方式，DISTINCT确保每个ID只插入一次。

SQL Server #

支持CTE和NOT EXISTS两种写法，这里推荐CTE方案：

WITH missing_ids AS (
    SELECT DISTINCT RECORD_ID
    FROM your_table
    WHERE NOT EXISTS (
        SELECT 1
        FROM your_table sub
        WHERE sub.RECORD_ID = your_table.RECORD_ID
          AND sub.REC_STRING = 'LMT3'
    )
)
INSERT INTO your_table (RECORD_ID, REC_STRING)
SELECT RECORD_ID, 'LMT3'
FROM missing_ids;

NOT EXISTS在SQL Server中对大表的性能表现不错，尤其是有合适索引的时候。

性能优化建议 #

• 添加联合索引：给RECORD_ID和REC_STRING建立联合索引，能大幅加速缺失ID的筛选：

  CREATE INDEX idx_record_string ON your_table(RECORD_ID, REC_STRING);
  

• 分批次插入：如果表数据量极大（百万级以上），可以用LIMIT（MySQL）或OFFSET/FETCH（PostgreSQL/SQL Server）分批次插入，避免一次性锁表导致业务阻塞。
• 临时禁用触发器/约束：如果表有插入触发器或非必要约束，可以临时禁用，插入完成后再恢复，能明显提升插入速度。

内容的提问来源于stack exchange，提问作者Prasad Jayathilake