Intel D455相机Viewer与Python代码获深度图质量差异及校准问题

问题概述 #

Intel D455相机未完成校准，使用pyrealsense获取的深度图与官方RealSense Viewer存在非分辨率性画质差异；开启自动曝光后情况有所改善，但仍存在细微差别，怀疑差异根源在于校准参数未正确加载或配置不匹配。

解决步骤 #

1. 强制加载相机内置校准参数 #

官方Viewer会自动读取相机内部存储的校准数据，Python代码需显式确保校准参数加载：

import pyrealsense2 as rs

pipeline = rs.pipeline()
config = rs.config()
# 匹配Viewer使用的分辨率与帧率
config.enable_stream(rs.stream.depth, 1280, 720, rs.format.z16, 30)
config.enable_stream(rs.stream.color, 1280, 720, rs.format.bgr8, 30)

profile = pipeline.start(config)
depth_sensor = profile.get_device().first_depth_sensor()
color_sensor = profile.get_device().first_color_sensor()

# 启用自动曝光（已验证有效）
depth_sensor.set_option(rs.option.enable_auto_exposure, 1)
color_sensor.set_option(rs.option.enable_auto_exposure, 1)

# 启用深度-颜色对齐（Viewer默认开启）
align_to = rs.stream.color
align = rs.align(align_to)

try:
    while True:
        frames = pipeline.wait_for_frames()
        aligned_frames = align.process(frames)
        depth_frame = aligned_frames.get_depth_frame()
        color_frame = aligned_frames.get_color_frame()
        # 后续帧处理逻辑
finally:
    pipeline.stop()

2. 手动重新校准相机 #

若内置校准参数失效，需通过官方工具重新校准：

• 下载并运行Intel RealSense Calibration Tool
• 按照向导完成深度与RGB相机的内外参校准
• 校准完成后将参数保存至相机内部存储

3. 匹配Viewer的优化参数 #

Viewer默认启用了多项深度优化，需在Python代码中手动开启：

深度滤波配置

# 添加空间滤波（平滑深度图）
spatial_filter = rs.spatial_filter()
spatial_filter.set_option(rs.option.filter_magnitude, 2)
spatial_filter.set_option(rs.option.filter_smooth_alpha, 0.5)
spatial_filter.set_option(rs.option.filter_smooth_delta, 20)

# 添加空洞填充（修复深度图缺失区域）
hole_filling_filter = rs.hole_filling_filter()

# 应用滤波到深度帧
filtered_depth = spatial_filter.process(depth_frame)
filtered_depth = hole_filling_filter.process(filtered_depth)

额外匹配参数

• 开启自动白平衡：color_sensor.set_option(rs.option.enable_auto_white_balance, 1)
• 确保深度单位与Viewer一致：depth_sensor.set_option(rs.option.depth_units, 0.001)

4. 验证校准状态 #

通过代码确认校准参数是否有效加载：

calibration = depth_sensor.get_depth_calibration()
print("校准有效性:", calibration.is_valid())
print("深度相机内参:", calibration.get_intrinsics())

内容的提问来源于stack exchange，提问作者Artem Ivanov