Azure Data Factory管道CSV转SQL时空值异常处理求助

我之前在处理Azure Data Factory（ADF）数据管道导入CSV到SQL时也碰到过一模一样的问题，光改连接设置里的Null value确实经常不生效，给你几个亲测有效的解决方案：

1. 优先配置CSV数据集的空值规则，而非链接服务 #

很多人会误在Linked Service里设置Null value，但实际上CSV数据集的配置优先级更高：

• 打开你的CSV数据集，切换到Connection标签页
• 在Null value字段中填入你需要识别的空值标记：如果是无引号的空内容填""，如果是显式写了NULL的就填NULL
• 同时确认Quote character（默认是"）和Escape character设置正确——如果CSV里的空值是被引号包裹的（比如,"",），必须保证Quote character和文件里的一致才能正确解析空值

2. 在Copy Activity里直接处理空值映射 #

如果数据集配置还是没解决，直接在Copy Activity里做针对性处理：

• 进入Copy Activity的Mapping标签页，找到可能存在空值的字段
• 点击字段右侧的笔形图标，在Default value里设置对应的值：字符串类型可以设为""，数值/日期类型设为NULL（要和目标SQL表的字段类型匹配）
• 另外在Settings标签页的Fault tolerance区域，勾选Skip incompatible rows并设置允许跳过的行数，或者选择Replace incompatible values，指定替换值为NULL，避免单个空值导致整个管道失败

3. 用Data Flow做精细化空值转换（如果使用Data Flow的话） #

如果你的管道用了Data Flow而不是简单的Copy Activity，推荐用Derived Column转换来处理：

• 添加一个Derived Column转换，对每个字段写表达式：

  iif(isNull(your_column) || your_column == '', null(), your_column)
  

  这个表达式会把空字符串或原生Null转换为SQL兼容的Null值
• 要是存在全空的行，也可以用Filter转换先过滤掉：isNotBlank(your_key_column)

4. 检查目标SQL表的字段约束 #

有时候异常根本不是来自ADF，而是目标表的字段设置了NOT NULL约束：

• 登录SQL Server或Azure SQL Database，查看目标表的DDL语句
• 确认允许空值的字段确实标记了NULL（比如[UserEmail] VARCHAR(100) NULL），如果是NOT NULL，要么修改表结构，要么在ADF里给该字段设置默认值

5. 验证CSV文件的空值实际格式 #

有些CSV里的空值看起来是空的，但实际是空格、制表符或者其他不可见字符：

• 用Notepad++这类编辑器打开CSV文件，开启显示所有字符（View > Show Symbol > Show All Characters）
• 确认空值的实际内容，然后在数据集的Null value里填入对应的内容（比如是空格就填 ）

如果尝试完这些方法还是有问题，可以补充下你的ADF版本、CSV的示例行、目标表的字段类型这些细节，我再帮你排查~

内容的提问来源于stack exchange，提问作者Praveen Chowdary