如何通过Azure DevOps或Azure Data Factory自动执行SQL文件

一、工具选型建议：优先选择Azure DevOps #

你的需求是基于代码仓库的SQL脚本自动执行，Azure DevOps是匹配度更高的方案，不推荐使用Azure Data Factory实现：

• SQL文件本身就存储在Azure DevOps仓库中，无需额外做文件迁移，流水线可直接拉取SQLFiles目录下的所有内容
• 触发规则适配性更强：可同时配置每日定时触发、「SQLFiles目录有新增/修改提交时自动触发」两种规则，不需要额外开发新增文件检测逻辑
• SQL执行能力更原生：使用内置的Azure SQL Database deployment任务，仅需要填写目标数据库连接信息、指定SQL文件的仓库路径，即可批量执行整个目录的脚本，天然支持执行日志留存、失败告警、版本回滚能力，不需要额外开发
• Azure Data Factory的核心定位是数据集成与ETL/ELT流程调度，适配你的场景需要做大量额外配置，投入产出比极低

二、Azure Data Factory执行SQL文件的前置要求 #

如果确实需要使用Azure Data Factory实现该需求，必须先将SQL文件上传至Azure存储（Blob存储或ADLS Gen2均可）：

• ADF的内置活动无法直接读取Azure DevOps私有仓库中的文件内容，仅支持读取Azure存储、公共可访问HTTP链接内的文件
• 使用ADF实现该需求还需要额外配置DevOps仓库到Azure存储的文件自动同步、新增SQL文件逻辑判断、SQL内容读取执行的自定义规则，整体流程复杂度远高于Azure DevOps方案

内容的提问来源于stack exchange，提问作者Kenny_I