SSIS脚本任务处理带引号CSV文件插入的字段拆分问题

你的问题根源在于手动通过替换分隔符来拆分CSV行的方式完全忽略了CSV的规范——CSV里允许用双引号包裹包含分隔符（逗号）的字段，这种情况下逗号不应该被当成分隔符。你现在的代码直接把所有逗号替换成','，自然会把字段内部的逗号也拆成新的字段，导致插入时列数不匹配。

解决这个问题的核心是用符合CSV规范的解析器来拆分每行数据，而不是自己造轮子。下面给你两种可行的方案：

方案一：使用.NET自带的TextFieldParser（无需额外依赖） #

.NET框架里的Microsoft.VisualBasic.FileIO.TextFieldParser专门用来处理带格式的文本文件，包括CSV。它能正确识别双引号包裹的字段，忽略字段内部的分隔符。

具体代码示例： #

// 首先引用命名空间（注意需要添加Microsoft.VisualBasic的项目引用）
using Microsoft.VisualBasic.FileIO;

// 假设line是你读取的CSV行内容
var fields = new List<string>();
using (var parser = new TextFieldParser(new StringReader(line)))
{
    parser.TextFieldType = FieldType.Delimited;
    parser.SetDelimiters(",");
    parser.HasFieldsEnclosedInQuotes = true; // 关键配置：告诉解析器字段允许被双引号包裹
    fields.AddRange(parser.ReadFields());
}

// 处理字段：转义SQL中的单引号，同时移除字段两端的多余双引号
var escapedFields = fields.Select(f => 
    $"N'{f.Trim('"').Replace("'", "''")}'").ToList();

// 生成正确的Insert语句
var query = $"INSERT INTO {SchemaName}.[{TableName}] ({ColumnList}) VALUES ({string.Join(",", escapedFields)})";

方案二：使用第三方库CsvHelper（更灵活强大） #

如果你的项目可以引入第三方NuGet包，CsvHelper是非常流行的CSV处理库，能应对更复杂的CSV场景（比如自定义分隔符、字段映射等）。

基本用法示例： #

1. 先安装NuGet包：Install-Package CsvHelper
2. 编写解析代码：

using CsvHelper;
using System.IO;

var fields = new List<string>();
using (var reader = new StringReader(line))
using (var csv = new CsvReader(reader, System.Globalization.CultureInfo.InvariantCulture))
{
    csv.Configuration.Delimiter = ",";
    csv.Configuration.Quote = '"'; // 指定字段包裹符为双引号
    fields = csv.Read().ToList();
}

// 同样处理字段转义和引号，生成Insert语句
var escapedFields = fields.Select(f => 
    $"N'{f.Trim('"').Replace("'", "''")}'").ToList();
var query = $"INSERT INTO {SchemaName}.[{TableName}] ({ColumnList}) VALUES ({string.Join(",", escapedFields)})";

额外注意事项 #

1. SQL注入风险：直接拼接SQL语句存在SQL注入风险，如果数据来自不可信来源，建议优先考虑参数化查询。不过因为你的表结构是动态的，参数化会相对复杂，至少要确保所有字段里的单引号都被转义成两个单引号（上述代码中的Replace("'", "''")就是做这个处理）。
2. 字段双引号清理：解析完成后记得移除字段两端的双引号，避免插入数据库后字段值带着多余的引号。

这样处理后，像"Office, Geographic Office (GIO)"这类带内部逗号的字段会被识别为一个完整的字段，不会被拆分，生成的Insert语句也能正确匹配列数，解决插入异常问题。

内容的提问来源于stack exchange，提问作者arcee123