如何使用FFmpeg与Python实现IP摄像头rtsp流无编解码多流复制
零编解码RTSP视频流多复制实现方案
环境适配说明
- 适配的开发运行环境为
Python 3.6、Ubuntu 18.04、OpenCV 4.1.0 - 输入源为IP摄像头输出的RTSP协议承载的H.264/H.265编码视频流
- 核心目标:全程不触发任何编码、解码操作,仅完成封装数据的透传复制,输出流满足实时系统的处理要求
核心实现逻辑
零编解码的本质是仅搬运封装层的原始编码数据包,不接触像素级解码流程,也不对编码流做任何重新编码、格式转换操作,所有透传数据保持源端的原始编码格式不变。
绝对不要直接用OpenCV的cv2.VideoCapture拉取RTSP源做流复制:该接口初始化时会默认加载解码器实例,哪怕不主动读取视频帧,也会引入不必要的资源占用,甚至触发隐式解码操作,完全违背零编解码的设计目标。
落地实现步骤
- 拉流层选型:采用兼容Python3.6的PyAV(FFmpeg的Python绑定)版本
av==8.0.4,该版本和Ubuntu18.04系统自带的FFmpeg依赖、已安装的OpenCV4.1.0的依赖完全兼容,不会出现库版本冲突 - 拉流阶段跳过解码器初始化,仅读取封装层的packet级数据,不做任何帧解析操作:
import av # 打开RTSP输入源,强制走TCP传输避免丢包 input_container = av.open( "rtsp://你的IP摄像头地址:554/主视频流", options={"rtsp_transport": "tcp", "stimeout": "2000000"}, timeout=10 ) # 获取输入流的基础参数,不初始化解码器 input_video_stream = input_container.streams.video[0] - 初始化多路输出通道,直接复用输入流的所有编码参数,不做任何转码配置:
output_container_list = [] # 示例为2路输出,可根据需求扩展路数,输出支持RTSP、TCP推流、TS文件等任意实时格式 for output_target in ["0.0.0.0:8901/live/out1", "0.0.0.0:8902/live/out2"]: out_cont = av.open(f"tcp://{output_target}", mode="w") # 直接以输入流为模板配置输出参数,全程无编码操作 out_stream = out_cont.add_stream(template=input_video_stream) output_container_list.append(out_cont) - 循环透传原始数据包,完成多流复制:
# 逐包读取输入源数据 for packet in input_container.demux(input_video_stream): # 跳过无效的流信息头包 if packet.dts is None: continue # 将原始编码包直接写入所有输出通道,不做任何修改 for cont in output_container_list: cont.mux(packet) - OpenCV4.1.0适配:如果后续需要基于输出流做实时分析,不需要修改复制链路的任何逻辑,仅需要在分析侧单独使用
cv2.VideoCapture读取对应输出通道的地址即可。这部分解码操作属于下游分析模块的独立逻辑,和零编解码的流复制链路完全解耦,不会增加复制流程的额外开销。
避坑提示
- 透传循环中绝对不要调用
packet.decode()方法,只要不触发解码接口,整个流程的CPU占用会和命令行FFmpeg做流拷贝的开销基本持平,远低于带解码的流转发方案 - 输出格式优先选择无严格索引要求的TS封装流,不要用需要文件头索引的MP4做实时输出,避免引入不必要的缓冲延迟
- 不要在Python3.6的环境下用GStreamer绑定实现该需求,对应版本的GStreamer Python接口在Ubuntu18.04上兼容性差,容易出现内存泄漏、流中断的问题
内容的提问来源于stack exchange,提问作者Hung Le
相关产品推荐
相关产品推荐

