使用OpenCV无法稳定捕获RTSP视频，如何实现更可靠的流捕获？

优化OpenCV原生捕获逻辑 #

你的现有重连逻辑未正确释放旧的VideoCapture资源，易引发资源泄漏，这是重连失败的核心原因。同时默认参数对RTSP适配性差，需手动配置缓冲、传输协议等参数：

import cv2

RTSP_URL = "你的RTSP地址"

def init_capture():
    cap = cv2.VideoCapture(RTSP_URL, cv2.CAP_FFMPEG)
    # 设置RTSP缓冲大小（单位：字节，可根据网络情况调整）
    cap.set(cv2.CAP_PROP_BUFFERSIZE, 1024*1024)
    # 强制使用TCP传输（UDP易在弱网环境丢包）
    cap.set(cv2.CAP_PROP_OPENCV_IO_ENABLE_TCP, True)
    return cap

cam = init_capture()
while True:
    ret, frame = cam.read()
    if not ret:
        # 先释放旧资源再执行重连
        cam.release()
        cam = init_capture()
        continue
    # 帧处理逻辑（示例：显示画面）
    cv2.imshow("RTSP Stream", frame)
    if cv2.waitKey(1) & 0xFF == ord('q'):
        break

cam.release()
cv2.destroyAllWindows()

使用Python-VLC直接捕获帧 #

既然VLC能稳定播放RTSP流，可直接借助python-vlc库复用其成熟的RTSP处理逻辑：

先安装依赖：pip install python-vlc

import vlc
import cv2
import numpy as np

RTSP_URL = "你的RTSP地址"

# 初始化VLC实例与播放器
instance = vlc.Instance("--quiet")
media = instance.media_new(RTSP_URL)
media.add_option(":rtsp-tcp")  # 强制TCP传输
media.add_option(":network-caching=300")  # 设置缓冲时间（毫秒）
player = instance.media_player_new()
player.set_media(media)

player.play()

while True:
    # 获取当前帧数据
    frame = player.video_get_frame()
    if frame is None:
        continue
    # 转换为OpenCV兼容格式
    width = player.video_get_width()
    height = player.video_get_height()
    img = np.array(frame).reshape(height, width, 4)  # VLC返回BGRA格式
    img = cv2.cvtColor(img, cv2.COLOR_BGRA2BGR)
    
    # 帧处理逻辑
    cv2.imshow("VLC RTSP Stream", img)
    if cv2.waitKey(1) & 0xFF == ord('q'):
        break

player.stop()
cv2.destroyAllWindows()

基于FFmpeg转码后捕获 #

若上述方案仍有问题，可通过FFmpeg将RTSP流转码为MJPEG管道流，再用OpenCV读取，这种方式稳定性最高：

import subprocess
import cv2
import numpy as np

RTSP_URL = "你的RTSP地址"
# FFmpeg命令：将RTSP转MJPEG流输出到管道
cmd = [
    "ffmpeg",
    "-rtsp_transport", "tcp",
    "-i", RTSP_URL,
    "-f", "mjpeg",
    "-q:v", "1",
    "-"
]

pipe = subprocess.Popen(cmd, stdout=subprocess.PIPE, bufsize=10**8)

while True:
    # 从管道读取帧数据
    raw_frame = pipe.stdout.read(4096)
    if not raw_frame:
        break
    # 解码为OpenCV格式
    frame = cv2.imdecode(np.frombuffer(raw_frame, dtype=np.uint8), cv2.IMREAD_COLOR)
    if frame is not None:
        cv2.imshow("FFmpeg RTSP Stream", frame)
    if cv2.waitKey(1) & 0xFF == ord('q'):
        break

pipe.terminate()
cv2.destroyAllWindows()

内容的提问来源于stack exchange，提问作者kuma