PostgreSQL使用COPY命令导入CSV时uuid类型字段报输入语法错误问题
PostgreSQL CSV 导入报错解决方法
报错根源拆解
- 初始导入报
invalid input syntax for type uuid: "null":导出CSV时,数据库空值被序列化为带双引号包裹的字符串"null",不符合PostgreSQL对SQL NULL的识别规则 - 调整QUOTE参数后报
COPY quote must be a single one-byte character:PostgreSQL的COPY命令中QUOTE参数仅支持单个单字节字符,传入'"null"'属于多字符输入,直接触发参数校验失败 - 替换空引号字段后报
invalid input syntax for type uuid: "":PostgreSQL CSV模式有明确规则——被双引号包裹的空字段(即"")会被解析为长度为0的普通字符串,不会匹配NULL ''的空值规则,导致uuid类型字段收到空字符串值触发类型转换报错 - 未暴露的潜在格式错误:目标表的
acl字段为jsonb类型,但样例CSV中该列的实际值为纯文本IS_PUBLIC,不符合JSON格式要求(合法JSON字符串值需要双引号包裹),就算空值问题解决,导入到jsonb字段时也会触发JSON解析错误
可行的导入操作方案
方案1:预处理CSV文件后直接导入
- 批量修改CSV文件内容
- 将所有独立字段位置的带引号空值
""替换为无引号的空字段 - 将
acl列的纯文本IS_PUBLIC修正为合法JSON格式"\"IS_PUBLIC\""
- 将所有独立字段位置的带引号空值
- 执行COPY导入命令
COPY doc(id, removed, modified_at, root_id, parent_id, acl, properties, data, file_meta) FROM '/tmp/doc.csv' DELIMITER ',' CSV HEADER QUOTE '"' NULL '';
方案2:临时表过渡导入(无需修改原始CSV,无文件损坏风险)
- 创建全字段为text类型的临时表,兼容CSV中的所有原始值格式
CREATE TEMP TABLE doc_temp ( id text, removed text, modified_at text, root_id text, parent_id text, acl text, properties text, data text, file_meta text );
- 将原始CSV跳过类型校验导入临时表
COPY doc_temp FROM '/tmp/doc.csv' DELIMITER ',' CSV HEADER;
- 清洗临时表数据:将空字符串转为SQL NULL,修正jsonb字段的格式
UPDATE doc_temp SET root_id = NULLIF(root_id, ''), parent_id = NULLIF(parent_id, ''), properties = NULLIF(properties, ''), data = NULLIF(data, ''), file_meta = NULLIF(file_meta, ''), acl = CASE WHEN acl = 'IS_PUBLIC' THEN '"IS_PUBLIC"' ELSE NULLIF(acl, '') END;
- 将清洗后的数据做类型转换,插入正式表
INSERT INTO doc SELECT id::uuid, removed::boolean, modified_at::timestamp, root_id::uuid, parent_id::uuid, acl::jsonb, properties::jsonb, data::jsonb, file_meta::jsonb FROM doc_temp;
内容的提问来源于stack exchange,提问作者DenisNovac
相关产品推荐
相关产品推荐

