You need to enable JavaScript to run this app. Azure Data Factory管道中是否支持存储可跨运行读写的变量?
优惠活动
大模型
产品
解决方案
定价
更多

Azure Data Factory管道中是否支持存储可跨运行读写的变量?

Azure Data Factory 原生持久化变量能力说明

Azure Data Factory 本身具备原生的跨管道运行持久化变量存储能力,无需依赖外接数据库即可实现运行时读取、运行后更新的需求。

核心基础说明

ADF 默认的管道级变量、数据流变量为单次运行生命周期,运行结束后自动销毁,无法跨运行保留值。如果需要跨运行持久化存储变量,可使用以下两类原生功能实现:

方案1:工厂级全局参数(最适配单值变量场景)

  • 全局参数是 ADF 原生提供的工厂级共享配置项,支持配置为运行时可更新模式,更新时无需重新发布 ADF 实例
  • 读取操作:在任意管道、活动中直接通过表达式 @pipeline().globalParameters.自定义变量名 调用即可
  • 更新操作:在管道运行末尾添加 Web 活动,调用 ADF 自身的管理接口更新全局参数值,身份验证可直接使用 ADF 托管身份完成,无需额外配置外部凭据

方案2:ADF 原生集成的存储对接(适配大体积/结构化变量场景)

如果需要存储体积超过全局参数上限(单值2MB)的结构化变量,可直接使用 ADF 原生内置的 ADLS Gen2 存储对接能力:

  • 读取操作:通过 Lookup 活动直接读取存储中保存的变量文件
  • 更新操作:通过 Copy 活动覆盖写入新的变量值即可,全程不需要额外对接第三方数据库

注意事项

  • 若需要为不同管道配置独立的持久变量,可对全局参数采用分组命名规则,例如 {管道标识}_{变量名} 的格式避免冲突
  • 全局参数天然支持全工厂权限共享,若有细粒度权限隔离需求可搭配 ADF 访问控制规则实现

内容的提问来源于stack exchange,提问作者MetallicPriest

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.10.17 16:06:04