C# WPF环境下BitmapImage与Mat互转实现OpenCV二值化图像显示失败求解

核心问题排查 #

你尝试的多个转换方案存在以下典型错误：

• 方案1的Bitmap转BitmapImage逻辑存在强制类型转换错误：Imaging.CreateBitmapSourceFromHBitmap返回的是BitmapSource基类实例，并非BitmapImage子类，直接强转必然抛出运行时异常
• 方案2中你保存的是新创建的空白Bitmap对象，而非传入的inputBitmap，输出必然是空图像
• 所有方案均未处理GDI对象释放问题，实时视频场景下会快速出现内存泄漏
• 二值化输出的Mat为单通道8位灰度格式，多数默认转换方法要求32位彩色格式，格式不匹配会导致图像显示异常、花屏

可行转换方案实现 #

1. BitmapImage 转 Bitmap 正确实现 #

private Bitmap BitmapImage2Bitmap(BitmapImage bitmapImage)
{
    int width = bitmapImage.PixelWidth;
    int height = bitmapImage.PixelHeight;
    int stride = width * 4; // BGRA32格式每行字节数
    byte[] pixelData = new byte[stride * height];
    bitmapImage.CopyPixels(pixelData, stride, 0);
    
    Bitmap bitmap = new Bitmap(width, height, System.Drawing.Imaging.PixelFormat.Format32bppArgb);
    var bitmapData = bitmap.LockBits(new System.Drawing.Rectangle(0, 0, width, height), 
        System.Drawing.Imaging.ImageLockMode.WriteOnly, bitmap.PixelFormat);
    Marshal.Copy(pixelData, 0, bitmapData.Scan0, pixelData.Length);
    bitmap.UnlockBits(bitmapData);
    return bitmap;
}

2. Bitmap 转 BitmapImage 正确实现 #

private BitmapImage Bitmap2BitmapImage(Bitmap bitmap)
{
    using (MemoryStream ms = new MemoryStream())
    {
        // 二值化图像用PNG格式保存无损耗，兼容单通道格式
        bitmap.Save(ms, System.Drawing.Imaging.ImageFormat.Png);
        ms.Position = 0;
        
        BitmapImage bi = new BitmapImage();
        bi.BeginInit();
        bi.CacheOption = BitmapCacheOption.OnLoad;
        bi.StreamSource = ms;
        bi.EndInit();
        bi.Freeze(); // 跨线程访问必须冻结，后台处理完返回UI线程赋值必备
        return bi;
    }
}

3. 更高效的Mat直接转BitmapImage方案（跳过Bitmap，性能提升30%+，适合实时视频场景） #

private BitmapImage MatToBitmapImage(Mat mat)
{
    // 单通道二值图转BGRA32，匹配WPF像素格式要求
    Mat bgraMat = new Mat();
    if (mat.Channels() == 1)
    {
        Cv2.CvtColor(mat, bgraMat, ColorConversionCodes.GRAY2BGRA);
    }
    else
    {
        Cv2.CvtColor(mat, bgraMat, ColorConversionCodes.BGR2BGRA);
    }

    int stride = bgraMat.Cols * 4;
    byte[] pixelData = new byte[stride * bgraMat.Rows];
    bgraMat.GetArray(0, 0, pixelData);
    bgraMat.Release();

    BitmapImage bi = new BitmapImage();
    using (MemoryStream ms = new MemoryStream())
    {
        BitmapSource bmpSource = BitmapSource.Create(bgraMat.Cols, bgraMat.Rows, 96, 96, 
            PixelFormats.Bgra32, null, pixelData, stride);
        PngBitmapEncoder encoder = new PngBitmapEncoder();
        encoder.Frames.Add(BitmapFrame.Create(bmpSource));
        encoder.Save(ms);
        ms.Position = 0;
        
        bi.BeginInit();
        bi.CacheOption = BitmapCacheOption.OnLoad;
        bi.StreamSource = ms;
        bi.EndInit();
        bi.Freeze();
    }
    return bi;
}

处理流程优化建议 #

1. 所有Mat、Bitmap对象用完立即释放，避免内存泄漏
2. 如果你的二值化处理在后台线程执行，返回的BitmapImage必须调用Freeze()方法才能赋值给UI线程的ImageSource
3. 实时场景建议直接用Mat转BitmapImage的方案，减少一次格式转换开销，帧率更高

内容的提问来源于stack exchange，提问作者오덕왕