使用OpenCV读取隔行MTS视频出现梳状效应如何获取正常帧

问题原因 #

你遇到的梳状条纹是隔行扫描视频的典型表现：MPEG2编码的.MTS格式多为摄像机拍摄的隔行扫描素材，每帧由两个不同时间采样的场交错拼接而成。主流媒体播放器会默认执行去隔行处理，而OpenCV的VideoCapture默认未开启该配置，因此直接读取的帧会出现条纹损坏，该问题和你之前处理逐行扫描的.avi、.mp4格式无此问题的表现一致。
异常帧示例：

正常帧效果参考：

解决方案 #

方案1：开启VideoCapture内置去隔行配置（推荐，性能损耗最小） #

在初始化VideoCapture后设置去隔行属性即可，修改后代码如下：

import cv2

cv2.namedWindow("frame", cv2.WINDOW_NORMAL)
cap = cv2.VideoCapture("00030.MTS")
# 开启去隔行处理，1代表启用
cap.set(cv2.CAP_PROP_VIDEO_DEINTERLACE, 1)

while cap.isOpened():
    ret, frame = cap.read()
    # 读取结束主动退出循环，避免报错
    if not ret:
        break
    cv2.imshow("frame", frame)
    cv2.waitKey(0)

cap.release()
cv2.destroyAllWindows()

该方案依赖OpenCV绑定的FFmpeg后端支持去隔行配置，绝大多数预编译的OpenCV版本都支持该属性。

方案2：手动实现去隔行算法 #

如果方案1不生效，可以在读到帧后手动执行去隔行处理，最简单的行平均法实现如下，性能损耗极低：

import cv2

def deinterlace_simple(frame):
    # 用上下行的平均值填充交错的隔行行，消除梳状条纹
    frame[1::2] = (frame[1::2] + frame[0::2]) // 2
    return frame

cv2.namedWindow("frame", cv2.WINDOW_NORMAL)
cap = cv2.VideoCapture("00030.MTS")

while cap.isOpened():
    ret, frame = cap.read()
    if not ret:
        break
    frame = deinterlace_simple(frame)
    cv2.imshow("frame", frame)
    cv2.waitKey(0)

cap.release()
cv2.destroyAllWindows()

如果对画质要求更高，可以替换为运动自适应去隔行、YADIF等更复杂的算法。

方案3：提前转码为逐行扫描视频（非实时场景首选） #

如果不需要实时读取原视频，提前用FFmpeg转码为逐行扫描的MP4格式，后续读取就不会有任何问题，转码命令如下：
ffmpeg -i 00030.MTS -deinterlace -c:v libx264 -crf 18 -c:a copy 逐行输出.mp4
其中crf参数控制画质，数值越小画质越高，文件体积越大，18是接近无损的常用参数。 #

内容的提问来源于stack exchange，提问作者Pavlo Sharhan