EmguCV使用MatchTemplate获取多匹配结果及误报问题解决

现有代码核心问题 #

• 多余二次归一化：你选用的TemplateMatchingType.CcoeffNormed本身输出的结果已经是[0,1]区间的归一化相似度，额外做CvInvoke.Normalize会将当前结果矩阵的最小值强制映射为0、最大值强制映射为1，哪怕原本最高匹配分远低于你设置的阈值，也会被拉满到1，直接导致大量低分误报被筛选进来，这是误报率高的核心原因。
• 分组参数配置错误：CvInvoke.GroupRectangles的第二个参数是「最小重叠框数量阈值」，填1的规则是只要有1个框就保留，完全没有过滤无效框的作用，通常设置为2-3即可，代表至少有2-3个重叠的匹配框才会被保留为有效结果。
• 分数丢失：你在收集匹配框时没有同步存储对应位置的相似度分数，分组后自然无法关联到原始得分。
• 遍历方式冗余：不需要将整个Mat转成多维数组遍历，EmguCV有原生方法可以直接提取符合条件的坐标。

优化后可用代码 #

CvInvoke.MatchTemplate(image, template, result, Emgu.CV.CvEnum.TemplateMatchingType.CcoeffNormed);

var rectangles = new List<Rectangle>();
var scores = new List<float>();
Size templateSize = template.Size;

// 原生高性能筛选，不需要两层for循环遍历全图
Mat mask = new Mat();
CvInvoke.Threshold(result, mask, threshold, 1, Emgu.CV.CvEnum.ThresholdType.Binary);
Point[] validPoints = CvInvoke.FindNonZero(mask).ToArray();

foreach (Point p in validPoints)
{
    float currentScore = result.Get<float>(p.Y, p.X);
    rectangles.Add(new Rectangle(p.X, p.Y, templateSize.Width, templateSize.Height));
    scores.Add(currentScore);
}

// 分组去重：第二个参数设为2，代表至少2个重叠框才保留；第三个参数为重叠IOU阈值，默认0.2即可
var rectVec = new VectorOfRect(rectangles.ToArray());
var scoreVec = new VectorOfFloat(scores.ToArray());
CvInvoke.GroupRectangles(rectVec, scoreVec, 2, 0.2);

// 输出最终结果
Rectangle[] finalRects = rectVec.ToArray();
float[] finalScores = scoreVec.ToArray();
for (int i = 0; i < finalRects.Length; i++)
{
    response.Add(new TemplateMatch
    {
        Position = new Point(finalRects[i].Left, finalRects[i].Top),
        Score = finalScores[i],
        Size = templateSize,
        Valid = true
    });
}

调整建议 #

• 阈值可根据实际场景调整，CcoeffNormed模式下通常设置0.7-0.8即可过滤绝大多数误报。
• 若场景中匹配对象重叠度高，可适当调高GroupRectangles的第三个IOU阈值到0.3-0.5。

内容的提问来源于stack exchange，提问作者rbasniak