Azure Batch调用Job Add API时资源文件未下载到wd目录问题咨询

你当前遇到的资源文件未自动下载的核心问题及解决方法如下： #

核心问题原因 #

1. 参数匹配错误：你在resourceFiles中使用了storageContainerUrl字段，但传入的值是单个文本文件的访问地址，不是Blob容器的根地址。storageContainerUrl仅用于指定整个Blob容器的拉取路径，如果你只需要拉取单个文件，应该使用httpUrl字段。
2. 存储访问权限缺失：如果你的存储容器是私有权限，传入的资源地址必须附带具备读取权限的SAS令牌，令牌有效期需要覆盖任务的整个运行周期，否则Batch服务没有权限拉取存储资源，会静默下载失败且不影响任务本身的启动状态。

正确配置示例 #

单个文件拉取配置

"resourceFiles": [
    {
        "httpUrl": "https://linkToMyStorage/MyProject/StartTask.txt?[你的SAS令牌]",
        "filePath": "StartTask.txt"
    }
]

整个容器/指定前缀文件拉取配置

如果你确实要拉取整个容器下的文件，修改为如下格式：

"resourceFiles": [
    {
        "storageContainerUrl": "https://linkToMyStorage/MyProject?[你的SAS令牌]",
        "blobPrefix": "" // 填写需要拉取的文件前缀，留空则拉取容器内所有文件
    }
]

额外排查方法 #

• 查看任务的stderr.txt日志，会记录资源文件下载失败的具体错误原因，比如403权限不足、404地址不存在等
• 可以临时修改任务命令行为cmd /c dir > dir_result.txt，执行后查看生成的dir_result.txt确认目录内文件情况，排除BatchExplorer的显示延迟问题
• 确认任务运行身份拥有工作目录的写入权限，默认配置下不会有该问题，如果你自定义了任务运行用户需要额外校验

内容的提问来源于stack exchange，提问作者Robertino