使用ADF通过Avro文件向Snowflake加载数据时整数类型不匹配问题求助

问题原因 #

Snowflake中INTEGER是NUMERIC(38,0)的别名，因此建表时指定INTEGER，底层实际存储为NUMERIC类型。ADF自动映射时会识别目标列为NUMERIC，但Avro的Integer（通常为32位）与Snowflake的NUMERIC类型在ADF的类型校验逻辑下不兼容，进而触发报错。

可行解决办法 #

• 手动修正ADF映射的目标类型：在复制活动的「映射」页签，找到对应列，将目标数据类型从NUMERIC手动改为INT（或INTEGER），强制指定与Snowflake整数类型匹配。ADF会按指定类型执行数据转换，绕过自动识别的NUMERIC类型校验。
• 调整Snowflake表列的显式定义：创建表时可显式指定列类型为INT（虽与INTEGER等价，但ADF类型识别逻辑可能优先匹配INT），或指定NUMERIC(32,0)匹配Avro Integer的范围，减少类型校验冲突。
• 使用ADF数据流动替代复制活动：在数据流动中添加「派生列」转换，将Avro的Integer列显式转换为兼容Snowflake整数类型的格式后再写入。数据流动的类型转换逻辑更灵活，能精准控制类型匹配。
• 关闭ADF的严格类型校验：在复制活动的「设置」页签，找到「类型转换设置」，启用「允许数据类型转换」或关闭「严格类型校验」（注：此方法可能忽略其他潜在类型问题，需谨慎使用）。

内容的提问来源于stack exchange，提问作者akshindesnowflake