OpenCV半透明叠加视频卡顿，如何优化提速？

是不是透明度计算导致的性能瓶颈？ #

是的，你当前的透明度计算方式确实是性能瓶颈之一。原代码中将uint8类型的帧转换为float进行浮点运算，再转回uint8，这个过程会带来额外的计算开销——浮点运算的效率远低于整数运算，而且逐像素的类型转换也会消耗CPU资源。

除此之外，还有几个潜在的性能损耗点：

• 未预先统一两个视频的分辨率，若视频尺寸不一致，叠加时会触发隐式尺寸匹配，增加额外计算量
• 视频读取环节未利用OpenCV的硬件加速能力
• 循环中频繁的print输出也会小幅拖慢运行速度

优化方案 #

1. 用OpenCV内置addWeighted替代手动浮点计算 #

OpenCV的cv.addWeighted是专门为图像加权叠加优化的函数，它直接在整数域完成优化后的定点运算，无需手动类型转换，速度远快于手动numpy浮点运算。

替换后的叠加代码：

tr = 0.5
frame_trans = cv.addWeighted(frame, 1 - tr, frame2, tr, 0)

2. 预先统一视频分辨率 #

在循环开始前，将两个视频的帧尺寸统一，避免后续叠加时的隐式转换：

# 获取主视频尺寸
width = int(video.get(cv.CAP_PROP_FRAME_WIDTH))
height = int(video.get(cv.CAP_PROP_FRAME_HEIGHT))
# 循环内读取帧后，统一第二个视频的尺寸
frame2 = cv.resize(frame2, (width, height))

3. 启用OpenCV硬件加速 #

创建VideoCapture时指定硬件加速后端，可大幅提升视频解码速度：

• Windows系统：cv.CAP_MSMF
• Linux系统：cv.CAP_V4L2/cv.CAP_GSTREAMER
• Mac系统：cv.CAP_AVFOUNDATION

示例代码：

video = cv.VideoCapture('photos/1.mp4', cv.CAP_MSMF)
video2 = cv.VideoCapture('photos/2.mp4', cv.CAP_MSMF)

4. 移除不必要的打印输出 #

循环中的print('no video')会在视频循环时频繁执行，拖慢速度，建议注释或替换为一次性日志输出。

5. 动态调整waitKey等待时间 #

根据视频帧率设置等待时间，避免CPU空转：

fps = video.get(cv.CAP_PROP_FPS)
wait_time = int(1000 / fps) if fps > 0 else 1
# 循环内替换为
if cv.waitKey(wait_time) == ord('d'):
    break

优化后的完整代码 #

import cv2 as cv

# 启用硬件加速后端（根据自身系统调整）
video = cv.VideoCapture('photos/1.mp4', cv.CAP_MSMF)
video2 = cv.VideoCapture('photos/2.mp4', cv.CAP_MSMF)

# 获取视频基础参数
width = int(video.get(cv.CAP_PROP_FRAME_WIDTH))
height = int(video.get(cv.CAP_PROP_FRAME_HEIGHT))
fps = video.get(cv.CAP_PROP_FPS)
wait_time = int(1000 / fps) if fps > 0 else 1

while True:
    ret, frame = video.read()
    ret2, frame2 = video2.read()

    # 循环播放视频
    if not ret:
        video.set(cv.CAP_PROP_POS_FRAMES, 0)
        continue
    if not ret2:
        video2.set(cv.CAP_PROP_POS_FRAMES, 0)
        continue

    # 统一帧尺寸
    if frame2.shape[:2] != (height, width):
        frame2 = cv.resize(frame2, (width, height))

    # 加权叠加
    tr = 0.5
    frame_trans = cv.addWeighted(frame, 1 - tr, frame2, tr, 0)

    cv.imshow('Transparent result', frame_trans)

    if cv.waitKey(wait_time) == ord('d'):
        break

video.release()
video2.release()
cv.destroyAllWindows()

内容的提问来源于stack exchange，提问作者Jon Nyström