Qt+OpenCV将QPixmap转AVI：直存失真与提速问题

一、失真与错位的核心原因 #

你遇到的视频失真、内容错位问题，本质是QImage与OpenCV图像格式的不匹配，以及直接memcpy时忽略了图像数据的内存布局细节：

1. 通道顺序不匹配：QImage默认是RGB/RGBA通道顺序，而OpenCV的图像（包括IplImage、Mat）默认采用BGR/BGRA顺序，直接拷贝会导致颜色失真。
2. 行步长（Stride）不一致：QImage的bytesPerLine（每行字节数）会因内存对齐要求可能大于宽度×每个像素字节数，而如果创建IplImage时未正确设置widthStep，直接memcpy会导致行数据错位，画面出现撕裂、偏移。
3. 图像格式/深度不匹配：若QImage是带Alpha通道的格式（如ARGB32），但IplImage创建时按3通道彩色图处理，会导致像素数据解析错误，出现乱码。

二、高效无失真的实现方案 #

放弃旧的IplImage C接口，改用OpenCV C++的cv::Mat和cv::VideoWriter，直接完成QImage到Mat的内存映射（无需冗余拷贝或仅做必要转换），既保证速度又避免格式错误。

步骤1：初始化VideoWriter #

提前设置正确的编码格式、帧率、分辨率，Windows平台推荐用MJPG编码（兼容性好且速度快）：

#include <opencv2/opencv.hpp>
#include <QPixmap>
#include <QImage>

// 假设单帧尺寸为frameWidth × frameHeight，视频帧率为fps
const int frameWidth = 1920;
const int frameHeight = 1080;
const double fps = 30.0;

cv::VideoWriter videoWriter;
// 设置MJPG编码（Windows下兼容性最优）
int fourcc = cv::VideoWriter::fourcc('M', 'J', 'P', 'G');
// 最后一个参数为true表示彩色视频，灰度图设为false
bool isColor = true;

// 初始化写入器，注意尺寸是cv::Size(width, height)
if (!videoWriter.open("output.avi", fourcc, fps, cv::Size(frameWidth, frameHeight), isColor)) {
    qDebug() << "Failed to open video writer";
    return;
}

步骤2：QPixmap转cv::Mat并写入视频 #

直接利用QImage的内存数据创建Mat，仅做必要的通道转换，避免冗余拷贝：

// 遍历处理每一个QPixmap（假设当前帧为pixmap）
QPixmap pixmap = getNextFramePixmap(); // 替换成你的帧获取逻辑
QImage img = pixmap.toImage();
cv::Mat frameMat;

// 根据QImage格式做对应转换
switch (img.format()) {
case QImage::Format_RGB888:
    // RGB888格式直接映射到Mat，再转成OpenCV的BGR格式
    frameMat = cv::Mat(img.height(), img.width(), CV_8UC3, img.bits(), img.bytesPerLine());
    cv::cvtColor(frameMat, frameMat, cv::COLOR_RGB2BGR);
    break;
case QImage::Format_ARGB32:
case QImage::Format_RGB32:
    // 带Alpha通道的格式，转成BGR（若保留Alpha则用COLOR_RGBA2BGRA）
    frameMat = cv::Mat(img.height(), img.width(), CV_8UC4, img.bits(), img.bytesPerLine());
    cv::cvtColor(frameMat, frameMat, cv::COLOR_RGBA2BGR);
    break;
case QImage::Format_Grayscale8:
    // 灰度图直接映射
    frameMat = cv::Mat(img.height(), img.width(), CV_8UC1, img.bits(), img.bytesPerLine());
    break;
default:
    // 其他格式先转成RGB888再处理
    img = img.convertToFormat(QImage::Format_RGB888);
    frameMat = cv::Mat(img.height(), img.width(), CV_8UC3, img.bits(), img.bytesPerLine());
    cv::cvtColor(frameMat, frameMat, cv::COLOR_RGB2BGR);
    break;
}

// 确保帧尺寸与VideoWriter一致，避免写入失败
if (frameMat.size() == cv::Size(frameWidth, frameHeight)) {
    videoWriter.write(frameMat);
}

步骤3：收尾释放资源 #

所有帧处理完成后，记得释放VideoWriter：

videoWriter.release();

额外优化建议 #

• 预分配Mat内存：如果所有帧尺寸一致，可以提前创建好Mat对象，每次仅更新数据，避免重复内存分配。
• 批量处理：若帧生成速度快，可批量缓存少量帧后再写入，减少IO操作（但注意内存占用）。
• 编码格式选择：若追求更小体积，可尝试H.264编码（需OpenCV编译时支持对应codec），但MJPG在Windows下无需额外依赖，速度更快。

内容的提问来源于stack exchange，提问作者RKum