Azure Data Factory中ADLS Gen2文件与SQL表名不匹配的动态加载问题

方法1：嵌套Replace表达式（快速适配固定映射） #

针对当前三个文件与表的映射规则，直接在原有表达式基础上添加嵌套的replace函数，完成针对性名称转换：

@replace(replace(replace(item().name,'_20231026.txt',''), 'DC_RESUMEPDFs', 'DESCRIPTION_RESUME'), 'DESCRIPTION_Job_Index', 'DESCRIPTION_JOB')

逻辑说明： #

1. 第一步replace(item().name,'_20231026.txt','')：去掉文件名后的日期后缀，得到文件名前缀；
2. 第二步replace(..., 'DC_RESUMEPDFs', 'DESCRIPTION_RESUME')：将DC_RESUMEPDFs转换为目标表名DESCRIPTION_RESUME；
3. 第三步replace(..., 'DESCRIPTION_Job_Index', 'DESCRIPTION_JOB')：将DESCRIPTION_Job_Index转换为目标表名DESCRIPTION_JOB。

这种方式适合当前映射规则固定、后续不会频繁新增文件的场景，无需额外组件，直接修改表达式即可。

方法2：Lookup映射表（可扩展方案） #

如果后续会新增更多文件与表的映射，建议用Lookup活动加载映射配置，避免频繁修改表达式：

1. 创建映射配置表：在SQL数据库或ADLS中创建一个映射表（例如FileToTableMapping），存储文件名前缀与目标表名的对应关系：

   FileNamePrefix	TargetTableName
   DESCRIPTION_CANDIDATENOTES	DESCRIPTION_CANDIDATENOTES
   DC_RESUMEPDFs	DESCRIPTION_RESUME
   DESCRIPTION_Job_Index	DESCRIPTION_JOB

2. 添加Lookup活动：在ADF中添加Lookup活动，读取上述映射表的全部数据，输出为数组格式。

3. 在ForEach循环中匹配表名：遍历ADLS文件时，先提取文件名前缀，再通过表达式从Lookup结果中匹配对应的目标表名：

   @first(filter(activity('Lookup_FileToTable').output.value, equals(item().FileNamePrefix, replace(items('ForEach_Files').name,'_20231026.txt','')))).TargetTableName
   

   将该表达式赋值给复制活动的目标表名参数即可。

优势： #

后续新增文件与表的映射时，只需更新映射表数据，无需修改ADF的表达式或活动配置，维护成本更低。

内容的提问来源于stack exchange，提问作者user24937315