CockroachDB中使用CSV IMPORT INTO时的最安全数据转义方法

针对你用BCP导出的、以双引号包裹字符串且逗号分隔的CSV文件，在CockroachDB中使用IMPORT INTO时，最安全的转义配置需要严格匹配BCP的导出规则，具体操作如下：

• 核心参数匹配
  BCP导出时，若字符串本身包含双引号，会用两个连续双引号做转义（比如原内容He said "hello"会被导出为"He said ""hello"""）。导入时必须明确指定对应参数，确保解析正确：

  IMPORT INTO target_table (col1, col2, col3)
  CSV DATA ('path/to/your/exported_file.csv')
  WITH (
    DELIMITER = ',',    -- 匹配BCP的逗号分隔符
    QUOTE = '"',        -- 匹配BCP的双引号包裹规则
    ESCAPE = '"'        -- 关键配置：指定双引号为转义符，解析连续双引号为单个双引号
  );
  

• 特殊场景补充配置

  • 如果CSV包含Windows格式换行符（CRLF），或者引号内存在换行内容，添加NEWLINE = 'auto'让CockroachDB自动识别换行格式，避免错误拆分数据行：

    WITH (
      DELIMITER = ',',
      QUOTE = '"',
      ESCAPE = '"',
      NEWLINE = 'auto'
    );
    

  • 如果导出文件自带表头行，加上SKIP = 1参数跳过第一行。

• 验证导入正确性
  导入完成后，建议抽样检查包含特殊字符的记录，确认转义逻辑生效：

  SELECT col1 FROM target_table WHERE col1 LIKE '%""%';
  

  正常情况下，查询结果中的双引号会被还原为单个，确保数据与导出前一致。

内容的提问来源于stack exchange，提问作者mo lawler