如何使用FFmpeg解码IP摄像头输出的AAC网络音频流

核心错误点 #

• 最容易忽略的配置遗漏：你当前代码只给AVCodecContext的extradata字段赋值了内容，但是没有设置对应的extradata_size字段，FFmpeg解码器无法读取你传入的AAC配置信息，直接导致解码失败。你需要在拷贝完extradata后新增一行代码：

decoderContext->extradata_size = length;

• 流格式处理错误：IP摄像头输出的是*AAC-hbr（带头比特率格式）*的RTP封装流，你不能直接把RTP payload丢给解码器。根据你提供的SDP参数SizeLength=13; IndexLength=3; IndexDeltaLength=3，每个RTP包的音频负载开头会带2字节的AU Header，你需要先跳过这2个字节，取出后面的原始AAC帧数据再送入解码器，否则解码器拿到带额外头的无效数据会直接返回INVALID_DATA错误。

可选优化/兜底方案 #

• 如果你配置完extradata_size和处理完AU Header后还是解码失败，可以手动给每帧AAC原始数据添加7字节的ADTS头，对于你的16kHz单声道LC规格AAC，预定义的ADTS头模板为0xFF, 0xF1, 0x50, 0x80, 0x03, 0x7F, 0xFC，你只需要把帧长度字段替换成「当前AAC帧长度+7」即可，加了ADTS头的流不需要依赖extradata也可以正常解码。
• 你当前使用的avcodec_decode_audio4是FFmpeg废弃多年的旧接口，兼容性较差，建议替换为avcodec_send_packet + avcodec_receive_frame的新解码接口，避免底层适配问题。
• 确认你的parseGeneralConfigStr函数逻辑正确：要把ASCII字符串"1408"转换成十六进制字节0x14、0x08，长度为2字节，你当前的配置值本身是符合ASC（音频特定配置）规范的，不需要修改。

内容的提问来源于stack exchange，提问作者eruslu