OpenGL鼠标拾取：点击视口边缘时相机射线存在偏移如何解决

安全阿岳

2026-9-13

问题原因

你遇到的越靠近屏幕边缘射线越往中心偏移的问题，是三个典型的射线生成逻辑错误共同导致的：

矩阵乘法顺序错误：OpenGL的标准VP（视图投影）矩阵变换顺序是投影矩阵左乘视图矩阵，即mProjection * mView，矩阵乘法不满足交换律，你写反顺序后变换结果完全不符合预期。
未对VP矩阵求逆：你注释掉了invVP.SetInversed，相当于直接用正向的投影变换矩阵把屏幕坐标映射到世界空间，方向完全反了。你之前觉得求逆后结果偏差更大，本质是你求逆的是顺序错误的VP矩阵，结果自然不对。
缺少透视除法步骤：齐次坐标做矩阵变换后得到的4维向量，必须将x、y、z分量都除以w分量才能得到正确的3维世界坐标，你直接丢弃w分量取xyz，在透视投影下会产生和位置相关的非线性畸变，正好对应“离中心越远偏移越大”的现象。
射线方向计算逻辑错误：你直接把反投影得到的单个点坐标归一化当方向，默认相机在世界坐标原点，一旦相机移动位置，方向计算就会出错。

修正代码

正确的射线生成需要分别反投影NDC空间的近裁剪面、远裁剪面点，做透视除法后，用两点的差值计算射线方向：

function CCamera.GetRay(x: Single; y: Single) : TVector3;
var
  mouseX: single;
  mouseY: single;
  invVP: TMatrix4;
  nearClip: TVector4;
  farClip: TVector4;
  worldNear: TVector3;
  worldFar: TVector3;
  dir: TVector3;
begin
  // 坐标转换到NDC空间，范围[-1, 1]，y轴翻转匹配OpenGL坐标约定
  mouseX := x / (fViewportWidth * 0.5) - 1.0;
  mouseY := 1.0 - y / (fViewportHeight * 0.5);

  // 正确计算VP矩阵并求逆
  invVP := mProjection * mView;
  invVP.SetInversed;

  // 反投影近裁剪面点（NDC z=-1 对应近平面）
  nearClip.Init(mouseX, mouseY, -1.0, 1.0);
  nearClip := invVP * nearClip;
  // 透视除法得到真实世界坐标
  worldNear.Init(
    nearClip.X / nearClip.W,
    nearClip.Y / nearClip.W,
    nearClip.Z / nearClip.W
  );

  // 反投影远裁剪面点（NDC z=1 对应远平面）
  farClip.Init(mouseX, mouseY, 1.0, 1.0);
  farClip := invVP * farClip;
  worldFar.Init(
    farClip.X / farClip.W,
    farClip.Y / farClip.W,
    farClip.Z / farClip.W
  );

  // 两点差值为射线方向，归一化后返回
  dir := (worldFar - worldNear).Normalize();
  Result := dir;
end;

你原来的鼠标事件逻辑不需要修改，只要确认GetCamera.GetPosition()返回的是世界空间下的相机坐标，和视图矩阵中使用的相机位置一致即可。

后续排查点

如果修正后仍有固定偏差，逐一检查以下配置：

确认fViewportWidth、fViewportHeight和实际渲染视口尺寸完全一致，存在窗口DPI缩放、边框偏移时，鼠标返回的坐标范围可能和视口尺寸不匹配，会导致固定比例偏移。
确认射线计算用的投影矩阵、视图矩阵和渲染时传给着色器的矩阵完全一致，不要在更新矩阵时遗漏射线计算的引用。
确认FastMath库的矩阵乘法采用和OpenGL一致的列主序约定，该库默认配置下和OpenGL兼容，不需要额外调整乘法顺序。

内容的提问来源于stack exchange，提问作者IOviSpot