如何在Azure CI中忽略特定错误（Playwright测试场景）

核心实现思路 #

通过Azure流水线YAML的continueOnError属性，仅对清理步骤开启失败忽略，同时保留测试步骤的失败告警逻辑，确保测试用例失败时流水线正常失败并触发追踪文件发布。

具体YAML配置示例 #

假设你通过矩阵策略运行3个项目的测试，配置如下：

jobs:
- job: RunPlaywrightTests
  strategy:
    matrix:
      Project1:
        PROJECT_NAME: 'project1'
      Project2:
        PROJECT_NAME: 'project2'
      Project3:
        PROJECT_NAME: 'project3'
  steps:
  # 运行Playwright测试：失败则标记job失败，流水线整体失败
  - script: npx playwright test $(PROJECT_NAME)
    displayName: '执行$(PROJECT_NAME)测试用例'

  # 清理步骤：忽略失败，不影响流水线状态
  - script: |
      # 替换为你的实际清理命令（比如删除临时文件、关闭测试资源等）
      npx playwright clean $(PROJECT_NAME)
    displayName: '清理$(PROJECT_NAME)测试环境'
    continueOnError: true

  # 仅在测试失败时发布追踪文件
  - task: PublishBuildArtifacts@1
    displayName: '发布$(PROJECT_NAME)测试追踪文件'
    condition: failed()
    inputs:
      PathtoPublish: 'test-results/traces'
      ArtifactName: 'traces-$(PROJECT_NAME)'

关键配置说明 #

• continueOnError: true：仅作用于清理步骤，该步骤无论成功或失败，都不会改变job的状态；测试步骤不配置此属性，失败时会直接标记job为失败。
• condition: failed()：发布追踪文件的步骤仅在job失败（即测试用例失败）时执行，完全匹配你需要的触发逻辑。
• 矩阵策略：自动为3个项目生成独立的测试+清理流程，每个项目的清理步骤都单独开启失败忽略。

特殊场景处理 #

如果你的清理逻辑是Playwright配置中的teardown钩子（而非独立流水线步骤），需要将钩子内的逻辑抽离为单独的流水线步骤，才能通过continueOnError控制失败忽略——因为Playwright内部钩子的失败会直接导致整个测试任务失败，无法单独忽略。

内容的提问来源于stack exchange，提问作者Lee McCready