Pandas DataFrame掩码报错：无法在含重复标签的轴上重新索引

问题根源 #

这个错误的核心是原DataFrame存在重复的索引标签。当你用rawData[mask]筛选时，Pandas会尝试通过索引标签对齐掩码和原数据，若索引有重复，无法唯一匹配行就会触发报错。

排查与解决步骤 #

• 先确认索引是否重复：

  # 检查是否存在重复索引
  print(rawData.index.duplicated().any())
  

  如果输出True，说明索引重复是问题的直接原因。

• 解决方法1：重置索引后筛选
  重置索引去掉重复标签，再重新执行筛选流程：

  # 重置索引（drop=True会丢弃原索引，需保留则去掉该参数）
  rawData = rawData.reset_index(drop=True)
  # 生成掩码（注意列名要加引号，除非overallResult是预先定义的变量）
  mask = rawData['overallResult'].eq("PASS")
  # 筛选数据
  filteredData = rawData[mask]
  

• 解决方法2：用.loc直接筛选（更推荐）
  .loc会严格按行顺序匹配布尔掩码，不受重复索引影响，是更稳定的筛选方式：

  mask = rawData['overallResult'].eq("PASS")
  filteredData = rawData.loc[mask]
  

• 额外注意点：
  确认生成掩码时的列名写法正确，rawData[overallResult]如果overallResult是列名字符串，必须加引号写成rawData['overallResult']，否则会被当成变量引发其他错误。

内容的提问来源于stack exchange，提问作者creosean