SQL Server删除log_rules表指定文件名非最新日志的SQL怎么写？

核心实现逻辑 #

采用窗口函数分组排序的方案实现，全程不依赖IN子句做大量值匹配，天然规避2000条条目数限制：

• 按file_name字段分组，同文件名的日志归为一组
• 每组内按create_date倒序排序，同时间戳的场景追加按主键log_rules_id倒序，确保最新的条目排序序号为1
• 直接删除排序序号大于1的所有非最新条目

全表去重SQL（处理所有文件名） #

WITH RankedLog AS (
    SELECT
        log_rules_id,
        ROW_NUMBER() OVER (
            PARTITION BY file_name
            ORDER BY create_date DESC, log_rules_id DESC
        ) AS row_num
    FROM log_rules
)
DELETE FROM RankedLog WHERE row_num > 1;

SQL Server支持可更新CTE，直接对CTE执行删除会自动映射到原表的对应行，无需关联原表二次查询。

仅处理指定文件名的去重SQL #

如果只需要清理指定部分文件名的重复条目，分两种场景处理：

场景1：指定文件名少于2000个 #

直接在CTE内加WHERE条件过滤即可：

WITH RankedLog AS (
    SELECT
        log_rules_id,
        ROW_NUMBER() OVER (
            PARTITION BY file_name
            ORDER BY create_date DESC, log_rules_id DESC
        ) AS row_num
    FROM log_rules
    WHERE file_name IN ('目标文件名1.log', '目标文件名2.log', ...)
)
DELETE FROM RankedLog WHERE row_num > 1;

场景2：指定文件名多于2000个 #

用临时表存储目标文件名，关联查询避免IN子句条数限制：

-- 1. 创建临时表存储待处理的文件名
CREATE TABLE #TargetLogFiles (
    file_name VARCHAR(255) NOT NULL PRIMARY KEY
);

-- 2. 插入所有需要处理的目标文件名，无条数限制
INSERT INTO #TargetLogFiles (file_name) 
VALUES ('file1.log'), ('file2.log'), ('file3.log'), ...;

-- 3. 执行去重删除
WITH RankedLog AS (
    SELECT
        l.log_rules_id,
        ROW_NUMBER() OVER (
            PARTITION BY l.file_name
            ORDER BY l.create_date DESC, l.log_rules_id DESC
        ) AS row_num
    FROM log_rules l
    INNER JOIN #TargetLogFiles t ON l.file_name = t.file_name
)
DELETE FROM RankedLog WHERE row_num > 1;

-- 4. 清理临时表
DROP TABLE #TargetLogFiles;

前置校验建议 #

执行删除前建议先查询确认待删除的条目是否正确，避免误删：

WITH RankedLog AS (
    SELECT
        *,
        ROW_NUMBER() OVER (
            PARTITION BY file_name
            ORDER BY create_date DESC, log_rules_id DESC
        ) AS row_num
    FROM log_rules
)
SELECT * FROM RankedLog WHERE row_num > 1;

内容的提问来源于stack exchange，提问作者fandang