Cypress不同标签测试并行执行失败：Spec不匹配问题求助

我们在并行模式下运行Cypress测试时遇到问题：使用不同标签（如smoke、regression）执行不同测试集时，系统提示spec（测试文件）不匹配，导致测试运行失败。

使用的命令 #

• Smoke测试命令：

  "test:smoke": "cypress run --browser chrome --record --key <key> --parallel --ci-build-id $BUILD_BUILDNUMBER --env grepTags=\"smoke\",grepFilterSpecs=true"
  

• Regression测试命令：

  "test": "cypress run --browser chrome --record --key <key> --parallel --ci-build-id $BUILD_BUILDNUMBER --env grepTags=\"regression\",grepFilterSpecs=true"
  

问题详情 #

尽管指定了不同测试标签，Cypress Cloud仍判定不同运行间spec不匹配，触发错误，无法为不同测试集执行并行测试。

错误日志（Regression测试） #

In order to run in parallel mode each machine must send identical environment parameters such as:

• specs
• osName
• osVersion
• browserName
• browserVersion (major)

This machine sent the following parameters:

{
  "osName": "linux",
  "osVersion": "Ubuntu - ",
  "browserName": "Chrome",
  "browserVersion": "114.0.5735.198",
  "differentSpecs": {
    "added": [
     .....
    ],
    "missing": [
     ....
    ]
  }
}

已尝试的解决方法 #

• 为每个测试组（smoke、regression）使用不同的Cypress密钥
• 为每次运行分配唯一的ci-build-id值
• 确保所有机器的环境配置和浏览器版本一致

1. 为何Cypress Cloud会跨不同运行比较测试spec？ #

Cypress Cloud的并行机制基于**同一个CI构建ID（ci-build-id）**分组并行任务。当用相同的ci-build-id运行不同标签的测试时，Cypress会判定这些任务属于同一个构建，要求所有并行节点上报的完整spec列表必须完全一致。而grepTags只是在节点内部过滤要执行的测试，并没有改变节点上报给Cloud的完整spec集合，因此Cloud会检测到不同节点的spec不匹配，触发错误。

2. 如何解决该问题？ #

方式一：为不同测试集使用独立的ci-build-id #

不给smoke和regression测试共享同一个BUILD_BUILDNUMBER，给每个测试集添加唯一标识，让它们属于独立构建：

• Smoke测试命令：

  "test:smoke": "cypress run --browser chrome --record --key <key> --parallel --ci-build-id $BUILD_BUILDNUMBER-smoke --env grepTags=\"smoke\",grepFilterSpecs=true"
  

• Regression测试命令：

  "test": "cypress run --browser chrome --record --key <key> --parallel --ci-build-id $BUILD_BUILDNUMBER-regression --env grepTags=\"regression\",grepFilterSpecs=true"
  

方式二：提前过滤spec文件 #

使用Cypress的--spec参数直接指定对应测试集的文件，替代仅用grepTags运行时过滤的方式。比如smoke测试集中在cypress/e2e/smoke/目录，regression在cypress/e2e/regression/：

• Smoke测试命令：

  "test:smoke": "cypress run --browser chrome --record --key <key> --parallel --ci-build-id $BUILD_BUILDNUMBER --spec \"cypress/e2e/smoke/**/*.cy.js\""
  

• Regression测试命令：

  "test": "cypress run --browser chrome --record --key <key> --parallel --ci-build-id $BUILD_BUILDNUMBER --spec \"cypress/e2e/regression/**/*.cy.js\""
  

方式三：使用Cypress Cloud测试分组功能 #

在Cypress Cloud后台为不同标签的测试创建独立测试组，确保每个组的并行任务使用对应配置，避免跨组的spec校验。

内容的提问来源于stack exchange，提问作者Albert Alov