如何从磁盘存储的H264码流中以恒定时间提取JPEG图像帧

你当前使用的select滤镜方案会从文件头开始逐帧解码、计数，直到命中目标帧，耗时随目标帧序号线性增长。且你使用的是无容器封装的裸H264流，没有索引信息，FFmpeg默认无法直接跳转到目标位置，只能线性扫描，这就是越靠后的帧提取速度越慢的核心原因。

方案1：预处理封装加索引（推荐，性能提升最明显） #

先将裸H264流无损封装到带索引的容器（MP4/MKV均可），这一步只做封装不做转码，速度极快：

ffmpeg -i 5sec.h264 -c:v copy 5sec.mp4

之后使用FFmpeg的输入前seek能力，将-ss参数放在-i前，FFmpeg会直接利用容器索引跳转到目标时间点附近的I帧，不需要从头扫描文件：

# 25fps下第25帧对应时间为1秒，第125帧对应5秒，可根据实际帧率换算
ffmpeg -ss 1.0 -i 5sec.mp4 -frames:v 1 -f image2 frame.jpg

如果需要精确匹配帧号，可以加-accurate_seek参数，FFmpeg会从跳转后的I帧开始解码到精确目标帧，仅需要解码少量帧，耗时基本恒定。

方案2：提前构建帧索引 #

如果无法修改原始文件格式，可以提前扫描一次文件，将每个帧的磁盘偏移、帧类型、对应帧号存储为独立索引文件，后续提取帧时：

• 对MJPEG格式：直接根据索引读取对应偏移的JPEG数据即可，无需解码，实现真正的恒定时间提取
• 对H264格式：跳转到目标帧前最近的I帧偏移，仅解码I帧到目标帧之间的少量帧即可，耗时基本不受目标帧序号影响

方案3：树莓派硬解优化 #

你当前使用的树莓派版FFmpeg已经编译了MMAL硬件解码支持，添加硬解参数可以进一步提升解码速度：

ffmpeg -ss 1.0 -c:v h264_mmal -i 5sec.mp4 -frames:v 1 frame.jpg

绝对的恒定时间查找对带P/B帧的H264码流不存在，因为P/B帧必须依赖前面的参考帧才能解码，但上述优化方案可以将查找耗时从线性增长降低到毫秒级稳定耗时，完全满足实时性要求。

内容的提问来源于stack exchange，提问作者Ross Gardiner