PostgreSQL导入CSV时空白与NULL映射异常问题求助

问题根源 #

你当前的COPY命令设置了Null ''，这会让PostgreSQL把CSV中无引号的空字段直接解析为NULL，而**用双引号包裹的空字符串（""）**则会被保留为空字符串''，这就是导致部分空白值转NULL、部分保留空白的原因。

解决方案 #

要实现“空白保持空白、NULL保持NULL”的原样导入，需要明确CSV中NULL值的标记，并调整COPY命令的Null参数：

1. 统一CSV中NULL的表示 #

先确认你的CSV里真正的NULL值用什么标记：

• 常规CSV会用\N表示NULL（PostgreSQL默认的NULL标记）
• 如果你的CSV用其他标记（比如NULL字符串）表示NULL，记好这个标记

2. 修改COPY命令的Null参数 #

根据CSV的NULL标记调整命令：

• 若CSV用\N表示NULL：

  COPY table_name FROM STDIN WITH (FORMAT csv, DELIMITER E'~', Null '\N');
  

  效果：
  • CSV里的\N会被导入为PostgreSQL的NULL
  • CSV里的无引号空字段（如a~~b中间的空）、双引号包裹的空（a~""~b）都会被导入为空字符串''
• 若CSV用NULL字符串表示NULL：

  COPY table_name FROM STDIN WITH (FORMAT csv, DELIMITER E'~', Null 'NULL');
  

3. 验证导入结果 #

导入后可通过以下SQL确认字段值是否符合预期：

-- 统计空字符串和NULL的数量
SELECT 
  COUNT(*) FILTER (WHERE column_name = '') AS empty_string_count,
  COUNT(*) FILTER (WHERE column_name IS NULL) AS null_count
FROM table_name;

注意事项 #

• PostgreSQL 6.9是非常老旧的版本（发布于2000年左右），上述逻辑适用于该版本，但建议尽快升级到新版本以获得更好的稳定性和功能支持。
• 确保CSV格式统一：所有空字符串要么用""包裹，要么直接留空；所有NULL值统一用指定标记表示，避免格式混乱。

内容的提问来源于stack exchange，提问作者pooja Kumari