将多段MySQL查询合并为单查询：规避空值与重复值问题

看起来你是想把三个不同时间范围的number数据整合到一张表中，既要避免空值，又要保证number列没有重复值。先帮你分析下现有两个查询的问题，再给出可行的解决方案：

现有查询的问题分析 #

QUERY 1的问题 #

你写的QUERY 1存在两个关键问题：

1. 时间条件错误：三个子查询的WHERE条件都是date = CURDATE() - interval 1day，这意味着你每次插入的都是同一天的数据，完全没用到2天和7天的时间范围；
2. 单字段插入逻辑偏差：如果你的目标是把三个时间范围的number分别存入不同列，那当前写法只插入到同一个number列，会导致其他字段（如果有的话）出现大量空值；如果只是想收集所有时间范围的number，重复插入同一列又会产生大量重复值。

QUERY 2的问题 #

你用逗号连接三个子查询的写法会触发笛卡尔积，这会让三个子查询的结果两两组合。比如每个子查询返回100条数据，最终会生成100*100*100=1000000条数据，完全达不到按number分组去重的目的。

针对需求的解决方案 #

根据你的描述，整理了两种常见场景的解决方案，你可以根据实际表结构和需求选择：

场景1：把三个时间范围的number存入同一列，确保无重复、无空值 #

如果你的目标是收集过去1天、过去2天、过去7天出现过的所有number，且number列唯一、无空值，可以用UNION DISTINCT合并查询结果，它会自动去重并过滤空值：

INSERT INTO target_table (number)
SELECT number FROM (
    -- 过去1天的number
    SELECT number FROM test.test 
    WHERE date = CURDATE() - INTERVAL 1 DAY
    UNION DISTINCT
    -- 过去2天的number（用>=避免漏掉当天）
    SELECT number FROM test.test 
    WHERE date >= CURDATE() - INTERVAL 2 DAY
    UNION DISTINCT
    -- 过去7天的number
    SELECT number FROM test.test 
    WHERE date >= CURDATE() - INTERVAL 7 DAY
) AS combined_numbers
WHERE number IS NOT NULL; -- 额外过滤空值，确保万无一失

注：UNION DISTINCT会自动去除重复的number，最后的WHERE条件可以兜底过滤掉可能存在的空值。

场景2：每个number对应一行，展示三个时间范围的存在状态 #

如果你的目标表需要记录每个number在三个时间范围是否存在（比如有number、day_1_exists、day_2_exists、day_7_exists字段），同时确保number唯一，可以用FULL JOIN关联子查询，再配合ON DUPLICATE KEY UPDATE避免重复插入：

首先确保目标表结构（若未创建）：

CREATE TABLE IF NOT EXISTS target_table (
    number INT PRIMARY KEY, -- 主键约束确保number唯一
    day_1 BOOLEAN COMMENT '是否在过去1天出现',
    day_2 BOOLEAN COMMENT '是否在过去2天出现',
    day_7 BOOLEAN COMMENT '是否在过去7天出现'
);

然后执行插入/更新操作：

INSERT INTO target_table (number, day_1, day_2, day_7)
SELECT 
    COALESCE(t1.number, t2.number, t7.number) AS number,
    CASE WHEN t1.number IS NOT NULL THEN TRUE ELSE FALSE END AS day_1,
    CASE WHEN t2.number IS NOT NULL THEN TRUE ELSE FALSE END AS day_2,
    CASE WHEN t7.number IS NOT NULL THEN TRUE ELSE FALSE END AS day_7
FROM (
    SELECT number FROM test.test WHERE date = CURDATE() - INTERVAL 1 DAY GROUP BY number
) AS t1
FULL JOIN (
    SELECT number FROM test.test WHERE date >= CURDATE() - INTERVAL 2 DAY GROUP BY number
) AS t2 ON t1.number = t2.number
FULL JOIN (
    SELECT number FROM test.test WHERE date >= CURDATE() - INTERVAL 7 DAY GROUP BY number
) AS t7 ON COALESCE(t1.number, t2.number) = t7.number
WHERE COALESCE(t1.number, t2.number, t7.number) IS NOT NULL -- 过滤空值
ON DUPLICATE KEY UPDATE
    day_1 = VALUES(day_1),
    day_2 = VALUES(day_2),
    day_7 = VALUES(day_7);

这里用FULL JOIN确保三个子查询中出现的所有number都被包含，COALESCE用来处理关联时的空值，ON DUPLICATE KEY UPDATE用来更新已存在number的状态，避免重复插入。

额外注意事项 #

• 提前过滤源表的空值：在子查询中添加WHERE number IS NOT NULL，从源头避免空值；
• 时间范围的边界：如果“过去N天”需要包含当天，用>=而非>，否则会漏掉当天的数据；
• 重复冲突处理：如果目标表已有数据，优先用ON DUPLICATE KEY UPDATE更新，而非INSERT IGNORE（后者会直接丢弃冲突数据）。

内容的提问来源于stack exchange，提问作者Avalon Parkes-barton