如何编写脚本批量校验PostgreSQL中Excel的30K个trans_id是否存在

算力阿峰

2026-8-15

解决方案

步骤1：将Excel中的trans_id转换为PostgreSQL数组格式

假设Excel中待校验的trans_id存于A列（A1至A30000）
在B1单元格输入公式：="'"&A1&"',"，下拉填充至B30000
复制B列所有内容，粘贴到文本编辑器中，删除最后一个多余的逗号
在内容首尾分别添加'{和}'，最终得到类似'{trans_001,trans_002,...,trans_30000}'的数组文本
注意：若trans_id包含单引号，需将所有'替换为''（两个单引号）以符合PostgreSQL字符串转义规则

步骤2：执行批量校验并导出结果

方法1：通过psql命令行直接输出到本地文件

执行以下命令（替换占位符为你的数据库信息、数组文本和输出路径）：

psql -U 你的用户名 -d 你的数据库名 -c "
WITH target_trans AS (
  SELECT unnest('{你的数组文本}'::text[]) AS check_id
)
SELECT 
  check_id,
  CASE WHEN t.trans_id IS NOT NULL THEN '存在' ELSE '不存在' END AS exists_status
FROM target_trans tt
LEFT JOIN schema.table t ON t.trans_id LIKE '%' || tt.check_id || '%'
ORDER BY check_id
" > /本地路径/校验结果.txt

方法2：通过psql交互模式使用\copy导出为CSV（更适合后续处理）

打开psql并连接到目标数据库：

psql -U 你的用户名 -d 你的数据库名

执行以下SQL导出命令（替换数组文本和输出路径）：

\copy (
  WITH target_trans AS (
    SELECT unnest('{你的数组文本}'::text[]) AS check_id
  )
  SELECT 
    check_id,
    CASE WHEN t.trans_id IS NOT NULL THEN '存在' ELSE '不存在' END AS exists_status
  FROM target_trans tt
  LEFT JOIN schema.table t ON t.trans_id LIKE '%' || tt.check_id || '%'
) TO '/本地路径/校验结果.csv' WITH (FORMAT CSV, HEADER, DELIMITER ',', ENCODING 'UTF8');