我来帮你梳理下遇到的两个核心问题——UIImage转OCVMat失败，以及CVPixelBuffer转OCVMat时的malloc崩溃，结合错误信息和框架逻辑，给你针对性的解决方案：

问题背景回顾 #

你在iOS Swift项目中使用LegoCV框架（将OpenCV原生C++类封装为OC类后桥接Swift），目前遇到两个关键问题：

1. 无法通过UIImage直接创建OCVMat
2. 从相机的CVPixelBuffer转换为OCVMat时应用崩溃，错误提示：

   opencv(1934,0x16f087000) malloc: *** error for object 0x16f086108: pointer being freed was not allocated ***
   

   你已经正确实现了AVCaptureVideoDataOutputSampleBufferDelegate，能正常接收相机帧缓冲区，但调用OCVMat(pixelBuffer: imageBuffer)时触发崩溃。

崩溃原因分析 #

这个malloc错误本质是内存所有权不匹配：LegoCV的OCVMat初始化时，错误地尝试释放了不属于它管理的内存区域。CVPixelBuffer的内存由AVFoundation负责管理，而LegoCV的内存分配器可能没有正确识别这种外部内存，导致销毁OCVMat时试图释放AVFoundation的内存，从而触发崩溃。

解决方案 #

1. 修复CVPixelBuffer转OCVMat的崩溃问题 #

我们可以手动复制CVPixelBuffer的像素数据到自己管理的内存中，再用这个内存创建OCVMat，让LegoCV只管理我们分配的内存，避免触碰AVFoundation的内存：

private func matFromSampleBuffer(sampleBuffer: CMSampleBuffer) -> OCVMat? {
    guard let imageBuffer = CMSampleBufferGetImageBuffer(sampleBuffer) else { return nil }
    
    // 锁定像素缓冲区，确保数据可安全访问
    CVPixelBufferLockBaseAddress(imageBuffer, .readOnly)
    defer {
        // 延迟解锁，确保函数退出时释放缓冲区
        CVPixelBufferUnlockBaseAddress(imageBuffer, .readOnly)
    }
    
    // 获取缓冲区基础信息
    let width = CVPixelBufferGetWidth(imageBuffer)
    let height = CVPixelBufferGetHeight(imageBuffer)
    let bytesPerRow = CVPixelBufferGetBytesPerRow(imageBuffer)
    guard let baseAddress = CVPixelBufferGetBaseAddress(imageBuffer) else { return nil }
    
    // 分配新内存并复制像素数据
    let copiedData = malloc(height * bytesPerRow)
    memcpy(copiedData, baseAddress, height * bytesPerRow)
    
    // 根据像素格式创建OCVMat（这里假设是RGBA格式，可根据实际调整类型）
    let mat = OCVMat(width: width,
                     height: height,
                     type: OCVMatTypeCV8UC4, // 对应8位4通道RGBA格式
                     data: copiedData,
                     step: bytesPerRow)
    
    // 注意：若LegoCV的OCVMat会自动管理传入的data内存，无需手动释放；否则需在合适时机调用free(copiedData)
    return mat
}

2. 修复UIImage转OCVMat失败的问题 #

UIImage的色彩空间或像素格式可能和OpenCV的要求不兼容，我们可以先将UIImage转换为标准的RGBA格式再尝试创建OCVMat：

guard let originalImage = UIImage(named: "myImage"),
      let originalCGImage = originalImage.cgImage else {
    print("无法获取有效UIImage/CGImage")
    return
}

// 创建兼容的CGContext，转换为RGBA格式
let width = originalCGImage.width
let height = originalCGImage.height
let bytesPerRow = width * 4
let colorSpace = CGColorSpaceCreateDeviceRGB()
let bitmapInfo = CGImageAlphaInfo.premultipliedLast.rawValue // 对应RGBA顺序

guard let context = CGContext(data: nil,
                              width: width,
                              height: height,
                              bitsPerComponent: 8,
                              bytesPerRow: bytesPerRow,
                              space: colorSpace,
                              bitmapInfo: bitmapInfo) else {
    print("无法创建CGContext")
    return
}

// 绘制原CGImage到新Context中
context.draw(originalCGImage, in: CGRect(x: 0, y: 0, width: width, height: height))

// 生成转换后的CGImage和UIImage
guard let convertedCGImage = context.makeImage(),
      let convertedImage = UIImage(cgImage: convertedCGImage) else {
    print("转换UIImage失败")
    return
}

// 尝试创建OCVMat
let mat = OCVMat(image: convertedImage)

额外调试建议 #

• 在Xcode中设置malloc_error_break断点：当崩溃发生时，查看调用栈，定位到LegoCV中具体哪一行代码在释放未分配的指针，能帮你更精准地定位框架内部问题。
• 检查CVPixelBuffer的实际像素格式：相机输出的帧可能是YUV格式（比如NV12），而非RGBA，这种情况下需要先将YUV转换为RGB格式，再创建OCVMat（可使用OpenCV的cvtColor函数处理）。

内容的提问来源于stack exchange，提问作者user924