CSV导入PostgreSQL：指定列映射并将文本转布尔值

方法一：临时表中转（推荐，易验证和调试） #

这种方法先把CSV原始数据导入临时表，再通过转换逻辑插入正式表，适合大多数场景，还能提前检查数据。

步骤1：创建与CSV结构匹配的临时表 #

假设CSV列依次为：fname, lname, birth_date, contact_email, is_active（值为Yes/No），正式表为persons(first_name text, last_name text, dob date, email text, active boolean)：

CREATE TEMP TABLE temp_persons (
    fname text,
    lname text,
    birth_date text,
    contact_email text,
    is_active text
);

步骤2：导入CSV到临时表 #

指定CSV列与临时表的映射（顺序可按需调整）：

COPY temp_persons(fname, lname, birth_date, contact_email, is_active)
FROM 'C:\sampledb\persons.csv'
DELIMITER ','
CSV HEADER;

步骤3：转换数据并插入正式表 #

完成列映射+Yes/No转布尔值的逻辑，同时处理日期格式（根据你的CSV日期格式调整TO_DATE参数）：

INSERT INTO persons(first_name, last_name, dob, email, active)
SELECT
    fname, -- CSV的fname对应正式表的first_name
    lname, -- CSV的lname对应正式表的last_name
    TO_DATE(birth_date, 'YYYY-MM-DD'), -- 转换日期格式，示例为年-月-日
    contact_email, -- CSV的contact_email对应正式表的email
    CASE 
        WHEN UPPER(is_active) = 'YES' THEN TRUE 
        WHEN UPPER(is_active) = 'NO' THEN FALSE 
        ELSE NULL -- 处理非Yes/No的异常值
    END
FROM temp_persons;

步骤4（可选）：删除临时表 #

DROP TABLE temp_persons;

方法二：直接通过命令行预处理（适合熟悉命令行的用户） #

如果不想用临时表，可以在COPY时通过外部命令预处理CSV，直接转换Yes/No为PostgreSQL布尔值（t/f）。

Linux/macOS（用awk） #

COPY persons(first_name, last_name, dob, email, active)
FROM PROGRAM 'awk -F, ''BEGIN{OFS=","} NR==1{$5="active"; print} NR>1{$5=($5=="Yes")?"t":"f"; print}'' /path/to/persons.csv'
DELIMITER ','
CSV HEADER;

Windows（用PowerShell） #

COPY persons(first_name, last_name, dob, email, active)
FROM PROGRAM 'powershell -Command "(Get-Content C:\sampledb\persons.csv) | ForEach-Object { if ($_ -match '',Yes,'') { $_ -replace '',Yes,'', '',t,'' } elseif ($_ -match '',No,'') { $_ -replace '',No,'', '',f,'' } else { $_ } }"'
DELIMITER ','
CSV HEADER;

注意事项 #

• 如果CSV里的Yes/No大小写不统一（比如yes/NO），方法一中的UPPER(is_active)可以统一转换为大写再判断，避免遗漏。
• 日期转换的格式必须和CSV中的日期格式完全匹配，比如CSV是MM/DD/YYYY，就把TO_DATE的第二个参数改成'MM/DD/YYYY'。
• 可以先查询临时表（SELECT * FROM temp_persons;）验证原始数据，确认没有异常值后再插入正式表。

内容的提问来源于stack exchange，提问作者Noah Shrewsbery