Gstreamer-sharp无法复现可用管道：MP4转JPEG遇问题求助

问题背景 #

现有可用GStreamer命令行管道：

gst-launch-1.0 filesrc location="d:\test.mp4" ! decodebin ! jpegenc ! multifilesink location="d:\test_img\img_%06.jpg"

尝试用C#代码复现该管道，两种方法均报错，具体情况如下：

方法1：使用Parse.Launch #

代码：

var pl = Parse.Launch("filesrc location=\"d:\\test.mp4" ! decodebin ! jpegenc ! multifilesink location="d:\test_img\\img_%06.jpg\"");

报错信息：

0:00:00.228884400  6180 000001136A79A360 WARN                 basesrc
 gstbasesrc.c:3693:gst_base_src_start_complete: pad not
 activated yet
0:00:00.234893700  6180 000001136A8AD4C0 WARN                 qtdemux
 qtdemux_types.c:267:qtdemux_type_get: unknown QuickTime node type gsst
0:00:00.235624500  6180 000001136A8AD4C0 WARN                 qtdemux
 qtdemux_types.c:267:qtdemux_type_get: unknown QuickTime node type gstd
0:00:00.236899200  6180 000001136A8AD4C0 WARN                 qtdemux
 qtdemux.c:3245:qtdemux_parse_trex: failed to find fragment
 defaults for stream 1
0:00:00.237568000  6180 000001136A8AD4C0 WARN                 qtdemux
 qtdemux.c:3245:qtdemux_parse_trex: failed to find fragment
 defaults for stream 2
0:00:00.280679200  6180 000001136A8AD4C0 WARN             d3d11device
 gstd3d11device.cpp:1271:gst_d3d11_device_get_video_device_handle:
 D3D11 call failed: 0x80004002, Not supported interface

方法2：手动构建元素 #

代码：

// Build the pipeline
var filesrc = ElementFactory.Make("filesrc", "source");
filesrc["location"] = "d:\\test.mp4";

var dec = ElementFactory.Make("decodebin", "decodebin");

var jpegenc = ElementFactory.Make("jpegenc", "jpegenc");

var multiFileSink = ElementFactory.Make("multifilesink", "multifilesink");
//multiFileSink["min-keyframe-distance"] = 100;
multiFileSink["location"] =      "D:\\test_img\\img_%d.jpg";


var pipeline = new Pipeline("test");

pipeline.Add(filesrc, dec, jpegenc, multiFileSink);

if (!filesrc.Link(dec))
{
    Console.WriteLine("Could not link pipeline elements");
    throw new Exception();
}


if (!dec.Link(jpegenc))
{
    Console.WriteLine("Problem to link dec and jpeg");
    throw new Exception();
}

if (!jpegenc.Link(multiFileSink))
{
    Console.WriteLine("Problem to link jpeg and multi");
     throw new Exception(); 
}

报错信息：

0:00:01.106256400 24088 0000019C81B84E80 WARN                 basesrc
 gstbasesrc.c:3132:gst_base_src_loop: error: Internal data
 stream error.
0:00:01.106834200 24088 0000019C81B84E80 WARN                 basesrc
 gstbasesrc.c:3132:gst_base_src_loop: error: streaming stopped,
 reason not-linked (-1)

错误分析与修正方案 #

针对方法1的问题 #

你的Parse.Launch字符串存在语法错误：

• location=\"d:\\test.mp4" 末尾缺少闭合双引号，应改为location=\"d:\\test.mp4\"
• location="d:\test_img\\img_%06.jpg\" 前半部分双引号未转义，且序号格式错误，应改为location=\"d:\\test_img\\img_%06d.jpg\"（%06需补d，和命令行一致指定6位数字序号）

修正后的代码：

var pl = Parse.Launch("filesrc location=\"d:\\\\test.mp4\" ! decodebin ! jpegenc ! multifilesink location=\"d:\\\\test_img\\\\img_%06d.jpg\"");

注：C#字符串中需用双反斜杠表示路径单斜杠，因此路径里的\要写成\\\\（转义后对应GStreamer解析的单个路径斜杠）

另外，报错中的D3D11警告属于可选硬件加速问题，不影响核心功能，若要规避可在管道前添加env GST_VIDEO_CONVERTER=d3d11，或改用decodebin3替代decodebin。

针对方法2的问题 #

核心错误：decodebin是动态生成pad的元素，不能直接用Link方法连接到jpegenc

decodebin会根据输入视频流格式动态创建src pad，必须监听它的pad-added事件，在回调中完成与jpegenc的链接。

修正后的代码：

// Build the pipeline
var filesrc = ElementFactory.Make("filesrc", "source");
filesrc["location"] = "d:\\test.mp4";

var dec = ElementFactory.Make("decodebin", "decodebin");

var jpegenc = ElementFactory.Make("jpegenc", "jpegenc");

var multiFileSink = ElementFactory.Make("multifilesink", "multifilesink");
multiFileSink["location"] = "D:\\test_img\\img_%06d.jpg"; // 保持与命令行一致的序号格式

var pipeline = new Pipeline("test");

// 添加元素到管道
pipeline.Add(filesrc, dec, jpegenc, multiFileSink);

// 链接filesrc到decodebin（固定pad，可直接链接）
if (!filesrc.Link(dec))
{
    Console.WriteLine("Could not link filesrc to decodebin");
    throw new Exception();
}

// 链接jpegenc到multifilesink（固定pad，可直接链接）
if (!jpegenc.Link(multiFileSink))
{
    Console.WriteLine("Could not link jpegenc to multifilesink");
    throw new Exception();
}

// 关键：监听decodebin的pad-added事件，动态链接到jpegenc
dec.PadAdded += (s, e) =>
{
    var srcPad = e.Pad;
    // 只处理视频流pad，避免音频流干扰
    if (srcPad.Caps.ToString().Contains("video/"))
    {
        var sinkPad = jpegenc.GetStaticPad("sink");
        if (!srcPad.Link(sinkPad))
        {
            Console.WriteLine("Failed to link decodebin src pad to jpegenc sink pad");
        }
    }
};

// 启动管道（原代码遗漏此步骤）
var bus = pipeline.Bus;
pipeline.SetState(Gst.State.Playing);

// 处理消息循环，防止程序直接退出
var msg = bus.TimedPopFiltered(Gst.ClockTime.None, Gst.MessageType.Error | Gst.MessageType.Eos);
if (msg != null && msg.Type == Gst.MessageType.Error)
{
    msg.ParseError(out var err, out var debug);
    Console.WriteLine($"Error: {err.Message}, Debug: {debug}");
}

// 清理资源
pipeline.SetState(Gst.State.Null);

额外注意事项 #

1. 确保D:\test_img目录已存在，否则multifilesink会因无法写入报错。
2. 序号格式%06d需与命令行一致，否则生成的文件名格式会不同（原代码用%d是无补零的默认格式）。
3. 运行代码前需确认GStreamer环境变量配置正确，所有依赖插件（如qtdemux、jpegenc等）可正常加载。

内容的提问来源于stack exchange，提问作者Sharov