OpenCV将前景图像叠加到背景时出现失真是什么原因？

使用OpenCV开展前景、背景图像叠加操作时出现图像失真异常，相关素材、复现代码、异常效果及修复方案如下：

相关素材 #

• 背景图像：
• 前景图像：
• Mask掩膜图像：

问题复现代码 #

background = cv2.imread('back.jpg')
image = cv2.imread('img.jpg')
mask = cv2.imread('mask.jpg')

crop_background = cv2.resize(background, (image.shape[1], image.shape[0]), interpolation = cv2.INTER_NEAREST)

mask = np.where(mask == 0, mask, image)
crop_background1 = np.where(mask == 0, crop_background, mask)

cv2.imshow(f'{i}', crop_background1)
cv2.waitKey(0)

异常运行效果 #

问题根因 #

• 掩膜读取错误：提供的掩膜为带透明通道的PNG格式，代码中默认以三通道模式读取，直接丢失了透明通道的有效掩膜信息；同时未做灰度化、二值化处理，逐通道做值判断时容易出现匹配偏差，引发串色、色偏。
• 叠加逻辑错误：代码中途直接覆写了mask变量，将原始掩膜替换为掩膜与前景的混合数组，后续区域判断的基准完全失效，导致前景、背景选取区域错位。
• 维度匹配错误：未将掩膜转换为与前景、背景一致的三通道格式，直接做np.where运算时会触发numpy广播机制，出现非预期的像素替换，进一步加剧失真。另外代码中cv2.imshow调用了未定义的变量i，也会触发运行报错。

修正后可运行代码 #

import cv2
import numpy as np

# 读取素材，掩膜以灰度模式读取
background = cv2.imread('back.jpg')
foreground = cv2.imread('img.jpg')
mask = cv2.imread('mask.png', 0)
# 对掩膜做二值化，确保只有0、255两类值，消除边缘半透明值的影响
_, mask = cv2.threshold(mask, 127, 255, cv2.THRESH_BINARY)

# 将背景缩放到和前景尺寸一致
crop_background = cv2.resize(background, (foreground.shape[1], foreground.shape[0]), interpolation=cv2.INTER_NEAREST)

# 将单通道掩膜转为三通道，匹配图像维度
mask_3channel = cv2.cvtColor(mask, cv2.COLOR_GRAY2BGR)
# 按掩膜区域叠加：掩膜值为255的区域取前景，为0的区域取背景
composite_result = np.where(mask_3channel == 255, foreground, crop_background)

cv2.imshow('composite_result', composite_result)
cv2.waitKey(0)
cv2.destroyAllWindows()

内容的提问来源于stack exchange，提问作者Kashif Hussain Dahri