OpenCV remap返回挤压图像而非预期偏移的问题排查

问题描述 #

我有一张名为distort.png的图像，其R、G通道存储运动矢量（原始位置偏移10像素）。使用remap函数执行代码后得到奇怪的挤压图像，而非预期的平移效果。

原代码：

import cv2
import numpy as np  # 原代码缺失该导入

distort = cv2.imread(r"D:\distort.png").astype(np.float32)
src = cv2.imread(r"D:\taj.png")

map_x = distort[:, :, 1].copy()
map_y = distort[:, :, 2].copy()

remapped_image = cv2.remap(src, map_x, map_y, interpolation=cv2.INTER_LINEAR)

cv2.imshow('Original Image', remapped_image)
cv2.waitKey(0)
cv2.destroyAllWindows()

当前失真效果：

预期平移效果：

源图像：

运动矢量文件：

问题原因 #

1. 通道与坐标逻辑混淆：OpenCV以BGR顺序读取图像，你提取的G（索引1）、R（索引2）通道对应X、Y方向矢量，但核心错误是搞反了remap的坐标规则——map_x/map_y是目标图像像素对应的源图像坐标，而非源到目标的偏移量。
2. 矢量值未还原：运动矢量存储时为避免负数，做了+10的偏移处理，直接使用会导致坐标计算错误。

解决方法 #

修正逻辑：

• 还原真实运动矢量（存储值减10）
• 基于remap规则，用目标坐标减去偏移量，得到对应源图像的坐标

修正后的代码 #

import cv2
import numpy as np

# 读取图像
distort = cv2.imread(r"D:\distort.png").astype(np.float32)
src = cv2.imread(r"D:\taj.png")
h, w = src.shape[:2]

# 提取并还原运动矢量：存储值=真实偏移+10
dx = distort[:, :, 1] - 10  # G通道对应X方向偏移
dy = distort[:, :, 2] - 10  # R通道对应Y方向偏移

# 生成目标图像的坐标网格
x_target, y_target = np.meshgrid(np.arange(w), np.arange(h))
# 计算源图像坐标：源位置 = 目标位置 - 偏移
map_x = x_target.astype(np.float32) - dx
map_y = y_target.astype(np.float32) - dy

# 执行remap，添加边界处理避免异常
remapped_image = cv2.remap(src, map_x, map_y, interpolation=cv2.INTER_LINEAR, borderMode=cv2.BORDER_CONSTANT)

cv2.imshow('Remapped Image', remapped_image)
cv2.waitKey(0)
cv2.destroyAllWindows()

补充说明 #

• borderMode=cv2.BORDER_CONSTANT用于处理平移后超出源图像范围的区域，避免出现异常黑边或像素值
• 若你的运动矢量定义为「源到目标的偏移」，就必须用目标坐标反向推导源坐标，这是remap函数的核心逻辑

内容的提问来源于stack exchange，提问作者user1767754