树莓派4用OpenCV设帧率超40时画面被裁切问题求助

问题原因 #

树莓派官方相机模块（如IMX219/IMX477）的传感器内置多种工作模式，每种模式对应固定的分辨率、帧率上限和视场范围：

• 当设置帧率超过40fps时，OpenCV会自动切换到高帧率裁切模式（比如IMX219的模式5），该模式仅采集传感器中心区域的画面，导致输出画面被大量裁切。
• 直接修改分辨率无法解决，因为裁切是由传感器工作模式决定的，而非软件层面的分辨率缩放。

解决方案 #

1. 指定非裁切的高帧率传感器模式 #

先查询你所用相机型号对应的传感器模式表（比如IMX219的模式6支持1280x720@49fps，且为全视场输出），再通过OpenCV强制指定该模式：

import cv2

# 指定相机ID和传感器模式（以IMX219模式6为例）
cam = cv2.VideoCapture(1)
cam.set(cv2.CAP_PROP_MODE, 6)  # 模式6对应1280x720@49fps，非裁切

# 匹配模式对应的分辨率
width = 1280
height = 720
cam.set(cv2.CAP_PROP_FRAME_WIDTH, width)
cam.set(cv2.CAP_PROP_FRAME_HEIGHT, height)
cam.set(cv2.CAP_PROP_FPS, 49)

while True:
    check, frame = cam.read()
    if not check:
        break
    cv2.imshow('video', frame)
    if cv2.waitKey(1) == 27:
        break
    
cam.release()
cv2.destroyAllWindows()

注意：不同相机型号的模式参数不同，需根据你的相机型号调整模式编号。

2. 使用GStreamer管道精确控制相机参数（推荐） #

如果OpenCV的CAP_PROP_MODE无法生效，建议用GStreamer管道直接调用libcamera（树莓派新系统默认相机框架），强制指定非裁切模式和高帧率：

import cv2

# 针对IMX219相机，1280x720@49fps全视场输出的GStreamer管道
gst_pipeline = (
    "libcamerasrc sensor-id=1 ! "
    "video/x-raw, width=1280, height=720, framerate=49/1 ! "
    "videoconvert ! video/x-raw, format=BGR ! appsink"
)

cam = cv2.VideoCapture(gst_pipeline, cv2.CAP_GSTREAMER)

while True:
    check, frame = cam.read()
    if not check:
        break
    cv2.imshow('video', frame)
    if cv2.waitKey(1) == 27:
        break
    
cam.release()
cv2.destroyAllWindows()

如果需要90fps且接受裁切（这是IMX219支持90fps的唯一模式），只需修改管道中的帧率和分辨率：

gst_pipeline = (
    "libcamerasrc sensor-id=1 ! "
    "video/x-raw, width=1280, height=720, framerate=90/1 ! "
    "videoconvert ! video/x-raw, format=BGR ! appsink"
)

3. 验证带宽兼容性 #

连接两台相机同时高帧率采集时，需确保CSI接口带宽足够：

• 单CSI接口支持的最大带宽约为1.5Gbps，两台相机的总数据量不能超过此限制（比如1280x720@90fps的单相机数据量约为300Mbps，两台合计600Mbps，在带宽范围内）。

额外说明 #

• 如果你的相机不支持非裁切的高帧率模式，那么90fps只能采用裁切模式，这是硬件限制，无法通过软件解决。
• 确保OpenCV是基于libcamera或raspicam编译的，否则无法正确控制树莓派相机的高级参数。

内容的提问来源于stack exchange，提问作者Nussbrot