Postgres COPY能否用FORCE_NULL (*)批量将空字符串转为NULL？

核心结论 #

FORCE_NULL (*)是完全可行的，能批量将所有列中的空字符串""转换为NULL，完美解决你遇到的类型转换报错问题。

具体说明 #

在PostgreSQL的COPY命令（包括通过aws_s3.table_import_from_s3从S3导入的场景）中，FORCE_NULL (*)是官方支持的语法：

• 它会对所有列生效，不管是日期、整数还是字符串类型，只要CSV中出现空字符串""，都会被转换为NULL，彻底避免invalid input syntax for type date: ""这类类型不匹配错误。
• 无需手动枚举所有字段，特别适合你这种字段数量多、字段名不固定的CSV导入场景。

示例代码 #

从S3导入的命令示例

SELECT aws_s3.table_import_from_s3(
    '目标表名',
    '', -- 留空表示匹配表中所有列
    'FORMAT CSV, HEADER, FORCE_NULL (*)',
    's3://你的存储桶路径/目标文件.csv',
    '你的AWS区域'
);

本地CSV导入的命令示例

COPY 目标表名 FROM '/本地文件路径/数据.csv'
FORMAT CSV
HEADER -- 如果CSV包含表头则添加此参数
FORCE_NULL (*);

注意事项 #

• 如果CSV文件包含表头行，必须在导入参数中加上HEADER，否则表头会被当作数据行处理，引发额外错误。
• 该语法支持PostgreSQL 9.3及以上版本，当前主流PostgreSQL版本均兼容。

内容的提问来源于stack exchange，提问作者lmmjrf