Windows平台C++使用OpenCV直接从摄像头捕获原生YUV帧方法咨询

核心前置说明 #

OpenCV默认的VideoCapture逻辑会自动将捕获的帧转成BGR格式，要绕过这个逻辑，必须配合DSHOW采集后端 + 正确的参数配置，你之前尝试的参数组合存在顺序和取值的问题，按下面的步骤调整即可。

必选配置步骤 #

• 必须使用CAP_DSHOW作为采集后端，FFMPEG、GSTREAMER后端在Windows下对USB摄像头原生格式的支持存在兼容问题，优先选DSHOW
• 打开摄像头前先关闭自动转RGB开关，必须在调用VideoCapture::open之前设置，不能在打开之后设置，这是之前配置失效的核心原因
• 明确设置摄像头支持的YUV格式的FOURCC编码，UYVY是多数UVC摄像头默认支持的YUV422格式，优先测试这个值

可运行代码示例 #

#include <opencv2/opencv.hpp>
#include <iostream>

using namespace cv;
using namespace std;

int main()
{
    VideoCapture cap;
    // 先关闭自动转RGB，注意顺序：必须在open之前设置
    cap.set(CAP_PROP_CONVERT_RGB, 0);
    // 用DSHOW后端打开摄像头，0是默认摄像头设备ID，可根据实际情况修改
    cap.open(0, CAP_DSHOW);
    
    if (!cap.isOpened()) {
        cout << "摄像头打开失败" << endl;
        return -1;
    }
    
    // 设置FOURCC为UYVY，根据你的摄像头实际支持的YUV格式调整，也可以试YUY2、NV12等
    int fourcc = VideoWriter::fourcc('U', 'Y', 'V', 'Y');
    cap.set(CAP_PROP_FOURCC, fourcc);
    // 可按需设置分辨率，要和摄像头支持的分辨率匹配
    cap.set(CAP_PROP_FRAME_WIDTH, 1920);
    cap.set(CAP_PROP_FRAME_HEIGHT, 1080);
    
    Mat yuvFrame;
    while (true) {
        cap.read(yuvFrame);
        if (yuvFrame.empty()) break;
        
        // 此时yuvFrame是单通道的原始字节流，UYVY格式下大小为 宽*高*2
        cout << "帧类型：" << yuvFrame.type() << "，帧尺寸：" << yuvFrame.size() << "，通道数：" << yuvFrame.channels() << endl;
        
        // 此处可以直接处理YUV数据，不需要转BGR
        // 示例：如果需要验证格式正确，可手动转成BGR显示，生产环境可删除这部分
        Mat bgrFrame;
        cvtColor(yuvFrame, bgrFrame, COLOR_YUV2BGR_UYVY);
        imshow("BGR验证窗口", bgrFrame);
        
        if (waitKey(1) == 27) break; // 按ESC退出
    }
    
    cap.release();
    destroyAllWindows();
    return 0;
}

常见问题排查 #

• 如果读取的帧大小不对，先确认你设置的FOURCC格式是摄像头实际支持的，可通过摄像头厂商的参数文档或者UVC工具查询设备支持的输出格式
• 如果设置CAP_PROP_CONVERT_RGB不生效，确认OpenCV编译时开启了DSHOW模块的支持，4.5.2官方预编译版本默认已开启，如果你是自行编译的OpenCV，需要勾选WITH_DSHOW编译选项
• 部分摄像头的YUV格式只在特定分辨率下支持，调整分辨率参数到对应值即可生效

内容的提问来源于stack exchange，提问作者beyond