如何为CVMetalTextureCache创建的纹理指定TextureUsage及性能咨询

我刚好之前处理过类似的需求，来给你拆解一下问题和可行方案：

首先得明确：CVMetalTextureCache确实没法直接指定MTLTextureUsage，它的textureAttributes参数目前是预留的，默认生成的纹理只有MTLTextureUsageShaderRead权限，所以没法直接作为渲染目标（需要MTLTextureUsageRenderTarget）。接下来给你对比两种主流方案的优缺点和性能表现：

方案一：CVMetalTextureCache + Blit拷贝 #

这是最常用的兼容方案，步骤很清晰：

• 先用缓存从CVPixelBuffer创建可读纹理；
• 提前准备好一个带RenderTarget权限的复用纹理（避免重复创建销毁）；
• 用MTLBlitCommandEncoder把可读纹理的内容拷贝到渲染目标纹理里。

优点 #

• 利用CVMetalTextureCache的纹理复用机制：如果你的输入帧尺寸固定（比如摄像头、固定分辨率的视频），缓存会自动复用已创建的纹理内存，避免频繁的内存分配/销毁开销，这对持续帧输入的场景很友好；
• 代码兼容性强，不管你的CVPixelBuffer是来自摄像头、视频解码还是其他来源，都能适配。

缺点 #

• 每帧多一次GPU blit拷贝，会消耗额外的内存带宽。对于高分辨率（比如4K）、高帧率（60fps+）的场景，会增加GPU的负载，可能影响渲染性能。

方案二：直接用MTLTextureDescriptor创建纹理 #

这种方案跳过缓存，直接生成符合需求的纹理：

• 根据CVPixelBuffer的尺寸、像素格式创建MTLTextureDescriptor，指定[.renderTarget, .shaderRead]的usage；
• 用descriptor生成纹理，再把CVPixelBuffer的像素数据拷贝到纹理中（可以用CPU的memcpy或者GPU blit，取决于数据的可访问性）。

优点 #

• 完全控制纹理的参数和权限，不需要依赖缓存的限制；
• 如果你的CVPixelBuffer是自己生成的（比如自定义图像处理输出），可以配置它的IOSurface属性支持渲染目标，这时直接通过descriptor绑定IOSurface创建纹理，不需要任何拷贝——这是性能最优的场景。

缺点 #

• 如果是持续的帧输入场景，每次创建新纹理会带来额外的内存分配开销，不如缓存的复用机制高效；
• 处理CVPixelBuffer的像素数据时需要注意字节对齐、内存权限等细节，代码复杂度稍高。

性能选择建议 #

• 低分辨率/低帧率场景：两种方案差异极小，选你代码维护起来更方便的就行；
• 高分辨率/高帧率场景：优先尝试能不能控制CVPixelBuffer的创建，让它的IOSurface支持渲染目标（比如设置kCVPixelBufferIOSurfacePropertiesKey里的属性），这样可以实现零拷贝的渲染目标纹理；如果没法控制CVPixelBuffer，就用方案一，但要注意复用渲染目标纹理，不要每次都创建新的，把blit拷贝的开销降到最低。

快速代码示例（方案一） #

// 假设已初始化：metalDevice, commandQueue, textureCache, cvPixelBuffer
var cvMetalTexture: CVMetalTexture?
let pixelWidth = CVPixelBufferGetWidth(cvPixelBuffer)
let pixelHeight = CVPixelBufferGetHeight(cvPixelBuffer)
let pixelFormat = MTLPixelFormat.bgra8Unorm // 匹配你的CVPixelBuffer格式

// 从缓存创建可读纹理
CVMetalTextureCacheCreateTextureFromImage(
    nil,
    textureCache,
    cvPixelBuffer,
    nil,
    pixelFormat,
    pixelWidth,
    pixelHeight,
    0,
    &cvMetalTexture
)
guard let inputTexture = CVMetalTextureGetTexture(cvMetalTexture) else { return }

// 复用渲染目标纹理（仅在尺寸变化时重新创建）
private var renderTargetTexture: MTLTexture?
if renderTargetTexture == nil 
    || renderTargetTexture!.width != pixelWidth 
    || renderTargetTexture!.height != pixelHeight {
    let descriptor = MTLTextureDescriptor.texture2DDescriptor(
        pixelFormat: pixelFormat,
        width: pixelWidth,
        height: pixelHeight,
        mipmapped: false
    )
    descriptor.usage = [.renderTarget, .shaderRead]
    renderTargetTexture = metalDevice.makeTexture(descriptor: descriptor)
}

// 执行Blit拷贝
let commandBuffer = commandQueue.makeCommandBuffer()!
let blitEncoder = commandBuffer.makeBlitCommandEncoder()!
blitEncoder.copy(from: inputTexture, to: renderTargetTexture!)
blitEncoder.endEncoding()
commandBuffer.commit()
commandBuffer.waitUntilCompleted()

// 现在renderTargetTexture可以直接作为渲染目标使用

内容的提问来源于stack exchange，提问作者vtruant