i.MX8平台GStreamer USB摄像头H264编解码管道协商报错

报错来自V4L2元件的内存与格式协商失败，和表面的caps格式声明无关：

• 你使用的v4l2jpegdec、v4l2h264enc、v4l2h264dec均为i.MX8平台的硬件加速V4L2元件，默认优先申请DMA-BUF物理连续内存实现零拷贝传输
• 无中间转换元件时，JPEG硬解码器输出的帧内存行步长（stride）、色彩空间元数据、内存对齐规则和H264硬编码器的输入要求不兼容，GStreamer自动协商机制无法自动修正参数，直接抛出协商失败错误
• 你之前能跑通的单解码显示管道，是因为autovideosink在Toradex镜像上会自动加载适配元件完成内存格式转换，不会触发协商冲突

在JPEG解码器和H264编码器之间插入格式转换元件+显式caps过滤器，强制对齐硬编码器输入要求，可用管道如下：

gst-launch-1.0 -v v4l2src device=/dev/video2 ! v4l2jpegdec ! videoconvert ! video/x-raw,format=NV12 ! v4l2h264enc ! v4l2h264dec ! autovideosink

如果上述管道仍有协商报错，额外插入v4l2convert元件完成V4L2内存类型转换即可：

gst-launch-1.0 -v v4l2src device=/dev/video2 ! v4l2jpegdec ! videoconvert ! video/x-raw,format=NV12 ! v4l2convert ! v4l2h264enc ! v4l2h264dec ! autovideosink

i.MX8平台V4L2硬编码器有固定输入要求，后续自定义管道时注意对齐：

• 支持的输入像素格式仅为NV12、I420
• 分辨率需要满足16像素对齐
• 仅支持逐行（progressive）扫描模式，摄像头输出隔行信号时需要先插入deinterlace元件处理

内容的提问来源于stack exchange，提问作者Alex