WPF+Kinect+OpenCV坐标匹配问题：Blob框与自定义矩形坐标不匹配

问题原因 #

核心问题是OpenCV图像坐标系与WPF Canvas坐标系未做映射匹配，具体表现为：

• OpenCV输出的Blob坐标基于Kinect原始图像分辨率（比如彩色流常用的640x480），而WPF中dot1-dot4的坐标是Canvas控件的显示尺寸（可能是1280x960或其他自定义尺寸），两者比例不一致导致数值对应不上。
• 如果图像在Canvas中存在拉伸、居中、偏移等布局调整，会进一步加剧坐标错位，直接导致判断逻辑失效。

修复方案 #

1. 统一坐标系比例转换 #

先获取Kinect输出图像的原始分辨率（根据你使用的流类型调整，深度流分辨率可能不同），再结合Canvas的实际显示尺寸计算缩放因子，将OpenCV的坐标转换为Canvas坐标系的坐标：

// 替换为你的Kinect图像实际分辨率
int kinectImgWidth = 640;
int kinectImgHeight = 480;

// 获取Canvas当前实际显示尺寸
double canvasActualWidth = yourCanvasControl.ActualWidth;
double canvasActualHeight = yourCanvasControl.ActualHeight;

// 计算缩放比例
double scaleX = canvasActualWidth / kinectImgWidth;
double scaleY = canvasActualHeight / kinectImgHeight;

MCvBox2D box = contours.GetMinAreaRect();
openCVImg.Draw(box, new Bgr(System.Drawing.Color.Red), 2);

// 将Blob中心坐标转换为Canvas坐标系
double canvasCenterX = box.center.X * scaleX;
double canvasCenterY = box.center.Y * scaleY;

2. 处理图像布局偏移 #

如果你的图像在Canvas中不是左上角对齐（比如居中显示），需要加上偏移量修正坐标：

// 计算图像在Canvas中的偏移量（居中场景示例）
double offsetX = (canvasActualWidth - kinectImgWidth * scaleX) / 2;
double offsetY = (canvasActualHeight - kinectImgHeight * scaleY) / 2;

// 修正后的坐标
canvasCenterX = box.center.X * scaleX + offsetX;
canvasCenterY = box.center.Y * scaleY + offsetY;

3. 优化区域检测逻辑（可选） #

如果需要检测整个Blob框而非仅中心点是否在自定义矩形内，可以将OpenCV框的四个顶点都转换为Canvas坐标，再判断矩形是否相交：

// 获取OpenCV框的四个顶点
Point2D[] boxPoints = box.GetVertices();
List<Point> canvasBoxPoints = new List<Point>();
foreach (var pt in boxPoints)
{
    double canvasX = pt.X * scaleX + offsetX;
    double canvasY = pt.Y * scaleY + offsetY;
    canvasBoxPoints.Add(new Point(canvasX, canvasY));
}

// 判断Blob框是否与自定义矩形相交（使用WPF的Rect类辅助判断）
Rect customRect = new Rect(minX, minY, maxX - minX, maxY - minY);
bool isIntersecting = canvasBoxPoints.Any(pt => customRect.Contains(pt));
if (isIntersecting)
{
    // 执行你的业务逻辑
}

4. 验证坐标正确性 #

可以在Canvas上绘制转换后的Blob中心点，确认其位置与OpenCV绘制的红色框中心重合，以此验证坐标映射是否正确。

内容的提问来源于stack exchange，提问作者math112311