从你描述的现象来看，这个稳定的线性漂移大概率和坐标系变换的误解有关，尤其是相机外参中旋转矩阵R和平移向量t的物理意义混淆，下面我一步步拆解可能的原因和验证方法：

1. 核心问题：相机位置的计算方式错误 #

首先要明确OpenMVG求解PNP返回的外参定义：通常PNP求解的是世界坐标系到相机坐标系的变换，公式为：
P_cam = R * P_world + t
这里的t是世界坐标系原点在相机坐标系下的平移向量，而不是相机在世界坐标系中的位置！

相机在世界坐标系中的真实位置C_world应该通过以下公式计算：

C_world = -R' * t;  % R'是R的转置，因为R是正交矩阵，转置等于逆

如果你直接把求解得到的t当成相机的世界位置，那么当相机旋转时，t会随着R的变化而线性变化（小角度旋转时R≈I+[ω]×，其中ω是旋转角速度向量），这就会导致你观察到的：

• 偏航角（yaw，绕Z轴旋转）变化时，X方向出现线性漂移
• 俯仰角（pitch，绕X轴旋转）变化时，Y方向出现线性漂移

你观察到的X ~= -4.0 * yaw_angle、Y ~= 4.0 * pitch_angle的系数，可能和你的3D点集的平均深度或者相机内参的尺度有关，但核心是计算相机位置时漏掉了-R'的转换。

2. 坐标系约定的二次验证 #

虽然你提到遵循OpenCV坐标系约定，但还是要确认两个细节：

• 欧拉角的旋转顺序：OpenCV默认的欧拉角顺序是roll-pitch-yaw（绕X-Y-Z轴），如果你计算pitch/yaw时用了其他顺序（比如Z-Y-X），会导致角度对应的轴错位，进而影响平移漂移的方向和系数。
• 世界坐标系与相机坐标系的轴方向：OpenCV相机坐标系是X右、Y下、Z向前；如果你的3D点集的世界坐标系轴方向不同（比如Y轴向上），没有做预转换的话，旋转时也会出现耦合的平移误差。

3. 验证步骤建议 #

你可以按以下步骤排查：

• 用正确的公式重新计算相机世界位置：C_world = -R' * t，再观察旋转时的位置变化，应该能消除线性漂移。
• 对比小角度旋转时的理论推导：当yaw角θ很小时，旋转矩阵R_yaw≈[cosθ, -sinθ, 0; sinθ, cosθ, 0; 0,0,1]，如果之前错误用t作为相机位置，那么t的X分量会近似为-θ*Z0（Z0是世界原点到相机的初始深度），这和你看到的线性关系完全吻合。
• 检查OpenMVG的外参输出文档：确认它返回的R和t是否严格遵循P_cam = R*P_world + t的定义，避免框架内的特殊约定。

4. 排除P3P或RANSAC的影响 #

你提到的线性关系和旋转角度无关，说明这不是P3P算法的固有误差（P3P的误差通常是非线性的，且和点的分布有关），也不是RANSAC的鲁棒性问题（RANSAC只会过滤 outliers，不会引入稳定的线性偏差），所以可以排除这两个因素。

内容的提问来源于stack exchange，提问作者HighVoltage