FFmpeg音频解码中AVCodecContext->frame_size与AVFrame->nb_samples样本数差异原因
字段值不匹配的原因说明
字段定义边界
两个字段不存在强制相等的约束,定义本身有本质区别:
AVCodecContext->frame_size:解码器初始化后确定的、对应编码格式的单标准帧每通道最大样本数。你的场景是MP3编码,该值固定为1152,是编码格式的固有属性,和实际解码输出无关。AVFrame->nb_samples:当前解码完成的帧中,每通道实际包含的有效样本数,取值完全由解码器当前输出的内容决定,不会强制等于标准帧大小。
nb_samples为47的直接诱因
结合你贴的结构体参数,当前异常来自解码流程的实现缺陷:
- MP3解码器存在内部输入缓冲机制,一个输入的AVPacket无法直接触发一整个标准大小的MP3帧解码时,解码器会先输出内部残留的零散残差样本。从当前AVFrame的参数看,
pkt_size=432、pkt_duration换算后远小于标准MP3帧的时长,这是MP3文件帧边界错位产生的残差帧,本身就不是1152样本的完整标准帧。 - 你的解码循环逻辑存在硬伤:在
avcodec_send_packet返回成功后,仅调用一次avcodec_receive_frame就直接处理输出,没有处理解码器的内部缓冲队列。正常MP3解码流程中,需要连续向解码器输入3-5个完整包后,解码器才会开始输出nb_samples=1152的标准帧;在输出标准帧之前,解码器会先吐出零散的残差小帧,也就是你当前观察到的47样本的情况。 - 后续解码验证可以确认:经过这个残差帧之后,连续输出的所有帧的nb_samples会稳定为1152,和frame_size取值一致。
现有代码的其他隐患
你当前的解码实现还有两个会导致后续数据错误的问题:
- 直接将AVFrame结构体值拷贝存入
audio_buffer,但AVFrame内部的buf、extended_data为指向解码缓冲区的指针,后续调用av_frame_free(&avframe)时,这些指针指向的内存会被释放,存入buffer的结构体会变为野指针,后续读取会出现内存越界问题。 - 没有在所有输入包送入解码器后,循环读取解码器内部残留的输出帧,会导致音频末尾的几十到几百个样本被遗漏。
修正参考
- 每次调用
avcodec_send_packet返回成功后,循环调用avcodec_receive_frame,直到返回AVERROR(EAGAIN)或错误,再处理下一个输入包。 - 所有输入包处理完成后,持续循环调用
avcodec_receive_frame,直到返回AVERROR_EOF,把解码器内部的缓冲帧全部读取出来。 - 向外部存储拷贝AVFrame时,使用
av_frame_ref完成带引用计数的安全拷贝,不要直接结构体值拷贝。
内容的提问来源于stack exchange,提问作者Abhinav Singh
相关产品推荐
相关产品推荐

