MySQL多行插入/更新（ON DUPLICATE KEY）失效问题求助

嘿，我一眼就看出问题所在了——你现在用的是多行UPDATE语句，但UPDATE本身只能修改已经存在的行，完全不会处理那些id不存在的新条目！这就是为什么你觉得操作“始终无法生效”——现有行可能更新了，但新增的根本没被插入进去，整体效果不符合你的预期。

UPDATE语句的设计逻辑是：匹配到符合WHERE条件（比如WHERE id = X）的行就修改，没匹配到就什么都不做。所以你用一堆UPDATE table SET ... WHERE id = ?的语句，只会更新已有的id，新id的条目完全不会被添加到数据库里。

要实现“存在则更新，不存在则插入”的需求，你需要用数据库原生的UPSERT语法（不同数据库叫法和写法不同），而不是单纯的UPDATE。

下面是主流数据库的批量UPSERT写法，适配你1400行数据的批量处理场景：

MySQL/MariaDB #

首先必须确保id列是主键或者带有唯一索引，这是触发“重复时更新”的前提。然后用INSERT ... ON DUPLICATE KEY UPDATE语法：

INSERT INTO your_table (id, column1, column2, column3)
VALUES
  (1, 'val1', 'val2', 'val3'),
  (2, 'val4', 'val5', 'val6'),
  -- 这里可以继续追加剩下的1398行数据
  (1400, 'valX', 'valY', 'valZ')
ON DUPLICATE KEY UPDATE
  column1 = VALUES(column1),
  column2 = VALUES(column2),
  column3 = VALUES(column3);

• VALUES(column1)表示取当前INSERT语句中对应行的column1值来更新现有行
• 如果有多个唯一键，要注意避免冲突触发意外的更新，确保只以id作为判断重复的依据

PostgreSQL #

同样需要id列有主键约束或唯一索引，用INSERT ... ON CONFLICT ... DO UPDATE语法：

INSERT INTO your_table (id, column1, column2, column3)
VALUES
  (1, 'val1', 'val2', 'val3'),
  (2, 'val4', 'val5', 'val6'),
  -- 追加剩余行
  (1400, 'valX', 'valY', 'valZ')
ON CONFLICT (id) DO UPDATE SET
  column1 = EXCLUDED.column1,
  column2 = EXCLUDED.column2,
  column3 = EXCLUDED.column3;

• EXCLUDED是PostgreSQL的特殊关键字，代表这次INSERT中被冲突拦截的那行数据

SQL Server #

可以用MERGE语句，或者较新的INSERT ... ON CONFLICT（SQL Server 2022+支持），这里推荐兼容性更好的MERGE：

MERGE INTO your_table AS target
USING (
  VALUES
    (1, 'val1', 'val2', 'val3'),
    (2, 'val4', 'val5', 'val6'),
    -- 追加剩余行
    (1400, 'valX', 'valY', 'valZ')
) AS source (id, column1, column2, column3)
ON target.id = source.id
WHEN MATCHED THEN
  UPDATE SET
    column1 = source.column1,
    column2 = source.column2,
    column3 = source.column3
WHEN NOT MATCHED THEN
  INSERT (id, column1, column2, column3)
  VALUES (source.id, source.column1, source.column2, source.column3);

1. 索引检查：一定要确认id列有主键或唯一索引，否则UPSERT语法会失效（比如MySQL的ON DUPLICATE KEY根本不会触发，PostgreSQL会直接插入重复id导致报错）
2. 权限验证：CRON任务使用的数据库账号必须同时拥有INSERT和UPDATE权限，否则会出现静默失败
3. 批量大小：虽然1400行不算特别多，但有些数据库对单条INSERT的VALUES数量有上限（比如MySQL默认是1000行），如果超过可以分成多个批量语句
4. 测试先行：先拿10条左右的测试数据（包含已有id和新id）验证语法，确认既有更新又有插入的效果，再放到CRON任务里执行

内容的提问来源于stack exchange，提问作者mtpultz