在OpenGL中计算两幅图像差值时如何妥善处理负值？

问题根源 #

你当前使用GL_UNSIGNED_BYTE格式纹理时，OpenGL会将着色器输出的颜色值自动截断到[0, 1]范围——因为无符号字节仅能存储0-255对应的归一化值[0, 1]，差值计算产生的负值会被强制置为0，导致客户端重建错误。

解决方案（无需切换32位浮点纹理） #

方法1：使用带符号归一化8位纹理（推荐） #

GL_RGB8_SNORM是OpenGL 3.0+支持的纹理格式，每个通道用带符号8位字节存储，对应归一化范围[-1, 1]，体积和GL_UNSIGNED_BYTE完全一致（RGB每像素3字节），完美适配差值的[-1, 1]范围（因高低质量图像均为[0,1]，差值范围刚好是[-1,1]）。

修改步骤：

1. 服务器端纹理创建：
   创建差值纹理时指定内部格式为GL_RGB8_SNORM，数据类型用GL_BYTE：

   GLuint diffTexture;
   glGenTextures(1, &diffTexture);
   glBindTexture(GL_TEXTURE_2D, diffTexture);
   glTexImage2D(GL_TEXTURE_2D, 0, GL_RGB8_SNORM, width, height, 0, GL_RGB, GL_BYTE, nullptr);
   // 设置纹理采样参数
   glTexParameteri(GL_TEXTURE_2D, GL_TEXTURE_MIN_FILTER, GL_LINEAR);
   glTexParameteri(GL_TEXTURE_2D, GL_TEXTURE_MAG_FILTER, GL_LINEAR);
   glTexParameteri(GL_TEXTURE_2D, GL_TEXTURE_WRAP_S, GL_CLAMP_TO_EDGE);
   glTexParameteri(GL_TEXTURE_2D, GL_TEXTURE_WRAP_T, GL_CLAMP_TO_EDGE);
   

   服务器端片段着色器无需修改，差值结果直接输出即可，OpenGL会自动将[-1,1]的浮点值映射到带符号字节存储。

2. 客户端处理：
   客户端采样差值纹理时，同样使用GL_RGB8_SNORM格式加载，OpenGL会自动将带符号字节还原为[-1,1]的浮点差值，客户端着色器无需修改，直接相加即可正确重建高质量图像。

方法2：差值偏移量化（兼容性 fallback） #

如果需要兼容更老的OpenGL版本，可通过着色器将差值范围从[-1,1]偏移缩放至[0,1]，适配GL_UNSIGNED_BYTE纹理，客户端再反向还原。

修改代码：

• 服务器端片段着色器：

  #version 330 core
  out vec4 FragColor;
  
  in vec2 TexCoord;
  
  uniform sampler2D HighTexture;
  uniform sampler2D LowTexture;
  
  void main()
  {
      vec3 diff = texture(HighTexture, TexCoord).rgb - texture(LowTexture, TexCoord).rgb;
      // 将[-1,1]差值映射到[0,1]范围，适配UNSIGNED_BYTE存储
      FragColor.rgb = diff * 0.5 + 0.5;
      FragColor.a = 1.0;
  }
  

• 客户端片段着色器：

  #version 330 core
  out vec4 FragColor;
  
  in vec2 TexCoord;
  
  uniform sampler2D LowTexture;
  uniform sampler2D DiffTexture;
  
  void main()
  {
      // 将[0,1]存储值还原为[-1,1]差值
      vec3 diff = (texture(DiffTexture, TexCoord).rgb - 0.5) * 2.0;
      FragColor.rgb = texture(LowTexture, TexCoord).rgb + diff;
      FragColor.a = 1.0;
  }
  

  纹理格式仍使用GL_UNSIGNED_BYTE，体积无增加。

针对你的问题的直接回答 #

1. 保持小体积处理负值：采用上述两种方法——要么用GL_RGB8_SNORM带符号纹理（体积与原格式一致），要么用偏移量化映射差值到无符号字节范围，均不会增加传输数据量。
2. 避免负值截断：放弃直接用GL_UNSIGNED_BYTE存储差值，改用GL_RGB8_SNORM格式；或通过着色器将差值偏移到[0,1]范围后再输出给GL_UNSIGNED_BYTE纹理。
3. 无需切换32位浮点纹理：上述两种方法都能完整保留差值的负值信息，同时维持低体积，完全满足你的带宽优化需求。

内容的提问来源于stack exchange，提问作者Stove Fire