如何使用Metal框架将kCVPixelFormatType_422YpCbCr8格式CVImageBufferRef转换为kCVPixelFormatType_32BGRA

以下方案完全在GPU侧执行，无CPU数据处理开销，无额外内存拷贝，不会增加内存占用

核心思路 #

两个需求可以合并为同一套Metal渲染管线实现，不需要额外中间环节：输入的2vuy格式采集缓冲区、输出的目标格式缓冲区都可以直接共享给Metal纹理，零拷贝完成GPU侧的格式转换+缩放，或仅做2vuy格式的缩放。

步骤1：配置CVPixelBuffer的Metal兼容性 #

首先确保AVCaptureSession输出的CVPixelBuffer、以及你要输出的目标CVPixelBuffer，都在配置时添加kCVPixelBufferMetalCompatibilityKey为true的属性，保证可以直接绑定为Metal纹理，不需要内存拷贝。

• 输入的kCVPixelFormatType_422YpCbCr8（即2vuy）对应Metal像素格式为MTLPixelFormatYUYV422
• 输出的kCVPixelFormatType_32BGRA对应Metal像素格式为MTLPixelFormatBGRA8Unorm

步骤2：绑定纹理到CVPixelBuffer #

通过系统原生的CVMetalTextureCacheCreateTextureFromImage接口，分别把输入、输出的CVPixelBuffer直接绑定为Metal纹理，整个过程共享原有缓冲区内存，不会产生额外拷贝。

步骤3：编写Metal内核实现功能 #

根据你的需求选择对应实现即可：

方案A：同时完成2vuy转BGRA + 缩放

核心内核代码示例：

#include <metal_stdlib>
using namespace metal;

// 此处为BT.601视频范围转换矩阵，若你采集的是BT.709色域可直接替换对应矩阵参数
constant float3x3 yuvToRgbMatrix = float3x3(
    float3(1.164,  1.164, 1.164),
    float3(0.0,   -0.392, 2.017),
    float3(1.596, -0.813, 0.0)
);

kernel void yuv422ToBgraScaler(
    texture2d<float, access::sample> input [[texture(0)]], // 绑定输入的2vuy纹理
    texture2d<float, access::write> output [[texture(1)]], // 绑定输出的BGRA纹理
    uint2 gid [[thread_position_in_grid]],
    sampler scalerSampler [[sampler(0)]]) // 采样器可配置缩放插值方式（线性/ nearest）
{
    // 按输出尺寸计算归一化采样坐标，直接实现缩放
    float2 normCoord = float2(gid) / float2(output.get_width(), output.get_height());
    float4 yuvSample = input.sample(scalerSampler, normCoord);
    // YUV转RGB运算
    float3 rgb = yuvToRgbMatrix * (yuvSample.rgb - float3(16.0/255.0, 128.0/255.0, 128.0/255.0));
    // 输出BGRA格式，交换R、B通道即可
    output.write(float4(rgb.b, rgb.g, rgb.r, 1.0), gid);
}

方案B：仅缩放2vuy格式，跳过转码

直接把输出纹理的像素格式改为MTLPixelFormatYUYV422，去掉着色器中的矩阵转换逻辑，采样后直接写入输出纹理即可，开销比转码方案低30%以上。

步骤4：执行管线 #

提前创建好Metal计算管线状态、采样器对象，每次拿到AVCaptureSession返回的采集缓冲区时，直接绑定输入输出纹理、派发线程组执行即可，整个流程无CPU介入数据处理。

内容的提问来源于stack exchange，提问作者prabhu