PostgreSQL使用COPY命令导入CSV时如何跳过首列数据？

方法1：使用COPY PROGRAM参数直接预处理导入（适用于PostgreSQL 11及以上版本） #

不需要提前生成新文件，直接在COPY命令中调用系统工具处理原始文件内容，过滤掉每行第一个|之前的内容后直接导入：

Linux/Mac环境 #

使用系统自带的cut命令处理：

COPY 你的目标表名
FROM PROGRAM 'cut -d "|" -f 2- /完整路径/原始数据文件.txt'
WITH (
    FORMAT 'text',
    DELIMITER '|',
    HEADER false
);

参数说明：cut -d "|" -f 2-表示以|为分隔符，截取每行第2列到最后一列的所有内容。

Windows环境 #

调用PowerShell处理文件内容：

COPY 你的目标表名
FROM PROGRAM 'powershell -Command "Get-Content ''/完整路径/原始数据文件.txt'' | ForEach-Object { $_.split(''|'', 2)[1] }"'
WITH (
    FORMAT 'text',
    DELIMITER '|',
    HEADER false
);

参数说明：split(''|'', 2)表示把每行按|最多分割为2部分，取下标为1的部分即第一个|之后的所有内容。

方法2：先预处理文件再导入（兼容所有PostgreSQL版本） #

如果你的PostgreSQL版本不支持PROGRAM参数，可以先手动预处理原始文件，再执行常规COPY导入：

• Linux/Mac预处理命令：

cut -d "|" -f 2- 原始数据文件.txt > 预处理后文件.txt

• Windows预处理命令（PowerShell执行）：

Get-Content 原始数据文件.txt | ForEach-Object { $_.split('|', 2)[1] } | Out-File 预处理后文件.txt -Encoding utf8

预处理完成后执行导入命令：

COPY 你的目标表名
FROM '/完整路径/预处理后文件.txt'
WITH (
    FORMAT 'text',
    DELIMITER '|',
    HEADER false
);

方法3：通过临时表中转导入 #

如果你的数据中包含转义竖线\|，预处理命令会错误识别分隔符，建议用临时表中转的方案：

1. 新建临时表，第一列用于存储要丢弃的首列内容，后续列和目标表结构、顺序完全一致：

CREATE TEMP TABLE temp_import (
    discard_col TEXT,
    col1 目标表第一列类型,
    col2 目标表第二列类型,
    -- 其他列和目标表完全对应
    coln 目标表第n列类型
);

2. 全量导入原始数据到临时表：

COPY temp_import
FROM '/完整路径/原始数据文件.txt'
WITH (
    FORMAT 'text',
    DELIMITER '|',
    HEADER false
);

3. 将有效列插入到目标表：

INSERT INTO 你的目标表 (col1, col2, ..., coln)
SELECT col1, col2, ..., coln FROM temp_import;

临时表会在当前数据库会话结束后自动删除，无需额外清理。

注意事项：

• 使用COPY PROGRAM参数时，需确保postgres系统用户有原始文件的读取权限，以及对应系统命令的执行权限。
• 导入全量数据前建议先截取少量测试数据验证导入逻辑，避免数据错误。

内容的提问来源于stack exchange，提问作者user9057272