如何避免Azure Pipeline测试重跑时覆盖测试报告工件？

核心思路 #

把重跑次数和feature标识结合到报告文件名里，确保每次重跑的每个feature都生成独立的报告文件，避免覆盖。Azure Pipeline内置变量$(System.JobAttempt)可直接获取当前执行批次（首次为1，第一次重跑为2，最多到3），用它区分重跑批次就能解决覆盖问题。

具体实现方案 #

方案1：直接在报告名中加入重跑次数和feature名称 #

如果测试命令支持指定报告文件名，直接把$(System.JobAttempt)和feature名称拼进去，不用依赖counter，更直观：

# 定义要执行的feature列表
variables:
  features: ['LoginFeature', 'CheckoutFeature']

steps:
- ${{ each feature in variables.features }}:
  - script: |
      dotnet test $(Build.SourcesDirectory)/YourTestProject.csproj \
        --filter "FeatureName=${{ feature }}" \
        --logger:"html;LogFileName=TestReport_${{ feature }}_Attempt$(System.JobAttempt).html"
    displayName: "Run ${{ feature }} tests (Attempt $(System.JobAttempt))"
    continueOnError: true # 允许失败后触发重跑

# 上传所有生成的报告作为工件
- publish: $(Build.SourcesDirectory)/TestResults
  artifact: TestReports_Attempt$(System.JobAttempt)
  displayName: "Upload test reports for attempt $(System.JobAttempt)"

生成的报告名类似TestReport_LoginFeature_Attempt1.html、TestReport_CheckoutFeature_Attempt2.html，完全不会冲突。

方案2：保留counter并结合重跑次数 #

如果一定要用counter标识feature的执行顺序，把counter和重跑变量结合即可：

steps:
- ${{ each feature in variables.features }}:
  - script: |
      dotnet test $(Build.SourcesDirectory)/YourTestProject.csproj \
        --filter "FeatureName=${{ feature }}" \
        --logger:"html;LogFileName=TestReport_Counter${{ counter('feature-run', 1) }}_Attempt$(System.JobAttempt).html"
    displayName: "Run feature ${{ counter('feature-run', 1) }}: ${{ feature }}"
    continueOnError: true

这里counter('feature-run', 1)会在每次循环时递增，再加上$(System.JobAttempt)，确保重跑时的counter值不会和之前的重复覆盖。

关键注意事项 #

• 工件上传时使用通配符（比如**/TestReport_*.html），或者按重跑批次分别上传，不要只上传单个固定命名的文件。
• 确认你的测试框架（Reqnroll/Playwright）支持通过命令行参数指定报告文件名，上面的示例基于dotnet test的标准logger参数，适配Reqnroll的HTML报告生成逻辑。

内容的提问来源于stack exchange，提问作者Kev