使用OpenCV捕获Optis Xi 400热成像相机流异常问题求助

问题根源 #

Optis Xi 400作为热成像相机，输出的是单通道16位灰度热数据（对应温度值），但你的代码中OpenCV默认将其解码为3通道8位BGR格式，导致色彩错乱。同时你设置的640x480分辨率与实际捕获的290x382不符，说明相机不支持该分辨率，设置未生效。

解决方案步骤 #

• 强制指定相机像素格式：热成像相机通常使用Y16（16位单通道）格式，需通过CAP_PROP_FOURCC设置对应编码。
• 转换16位数据到8位灰度图：将16位热数据归一化到0-255范围，才能正常显示为黑白热图。
• 移除无效参数设置：热成像相机不需要白平衡（CAP_PROP_WB_TEMPERATURE），且你设置的分辨率相机不支持，直接使用实际捕获的分辨率即可。

修改后的代码 #

import cv2
import numpy as np

camera_index = 0
cap = cv2.VideoCapture(camera_index)

# 设置热成像相机的像素格式为Y16（16位单通道）
cap.set(cv2.CAP_PROP_FOURCC, cv2.VideoWriter_fourcc('Y', '1', '6', ' '))

# 可尝试设置相机原生分辨率（Optis Xi 400原生分辨率通常为384x288，接近你捕获的290x382）
# cap.set(cv2.CAP_PROP_FRAME_WIDTH, 384)
# cap.set(cv2.CAP_PROP_FRAME_HEIGHT, 288)

while True:
    ret, frame = cap.read()
    if not ret:
        break
    
    # 处理16位单通道帧，转换为8位灰度图
    if frame.dtype == np.uint16:
        # 归一化到0-255范围
        frame_8bit = cv2.normalize(frame, None, 0, 255, cv2.NORM_MINMAX, dtype=cv2.CV_8U)
    else:
        # 若仍为3通道，提取灰度通道（热数据可能被错误打包）
        frame_8bit = cv2.cvtColor(frame, cv2.COLOR_BGR2GRAY)
    
    cv2.imshow('Thermal Camera', frame_8bit)
    if cv2.waitKey(1) == ord('q'):
        break

cap.release()
cv2.destroyAllWindows()

额外说明 #

• 若Y16格式无效，可尝试热成像常用的MONO16格式（对应fourcc为'M','1','6',' '）。
• 你捕获的帧形状为(290, 382, 3)，说明相机输出被错误解析为3通道，提取灰度通道可临时解决显示问题，但最好设置正确像素格式直接获取单通道数据，以保留完整温度信息。
• 热成像相机的亮度调节通常需要专用SDK或针对16位数据的直方图均衡，普通的CAP_PROP_BRIGHTNESS可能不生效，建议转换为8位后使用cv2.equalizeHist()优化显示效果。

内容的提问来源于stack exchange，提问作者vwertuzy