Azure Data Factory复制活动如何仅复制数据库表中不存在的文件

核心错误点 #

• IfCondition表达式逻辑存在问题：Lookup活动返回的value数组中每个元素是带file_name字段的对象，而非纯文件名的字符串数组，直接使用contains比对字符串类型的文件名和对象数组的元素，永远不会匹配成功，导致not(contains(...))永远返回true，所有文件都会触发复制操作，与预期逻辑不符。
• 额外注意：Azure Data Factory的动态表达式严格区分大小写，Get Metadata活动返回的子文件列表属性为childItems（字母I大写），你当前配置的ForEach遍历参数写的是全小写的childitems，存在取值为空的隐患，建议同步修正。

修正后的IfCondition表达式 #

直接替换原有表达式即可：

@not(contains(select(activity('Database Table File Lookup').output.value, 'file_name'), item().name))

逻辑说明 #

1. 先用select()函数提取Lookup返回的对象数组中每个元素的file_name字段值，将对象数组映射为纯文件名组成的字符串数组
2. 再用contains()判断当前遍历的文件名称是否存在于上述纯字符串数组中
3. 最后用not()取反，仅当文件未在数据库记录中存在时，才会触发后续的复制活动

可选校验步骤 #

如果需要验证逻辑正确性，可以在ForEach活动内、IfCondition活动前新增一个Set Variable活动，变量值配置为select(activity('Database Table File Lookup').output.value, 'file_name')，管道运行后查看该变量的输出，即可确认转换后的文件名数组是否符合预期。 #

内容的提问来源于stack exchange，提问作者CandleWax