如何在MRTK 3中让虚拟角色被真实物体遮挡？

核心思路 #

HoloLens 2的真实物体遮挡依赖空间感知生成的空间网格，MRTK 3通过配置空间感知模块、调整渲染层级和材质设置，让虚拟角色被不可见的空间网格遮挡，从而实现真实物体遮挡虚拟内容的效果。

步骤1：正确配置MRTK 3空间感知模块 #

1. 打开MRTK配置文件（如DefaultMixedRealityToolkitConfigurationProfile），切换到Spatial Awareness选项卡
2. 确保Spatial Awareness System处于启用状态，激活的系统选择WindowsMixedRealitySpatialAwarenessSystem
3. 在Spatial Mesh Settings区域：
   • 选择WindowsMixedRealitySpatialMeshObserver作为Mesh Observer，并勾选Enable Mesh Observer
   • 根据性能需求设置Mesh Level Of Detail：建议选Medium（平衡精度与帧率），若需要更高遮挡精度可选High
   • 设置Mesh Physics Layer为单独的层（比如命名为SpatialMesh），方便后续管理

步骤2：配置虚拟角色的渲染设置 #

1. 检查虚拟角色所有Renderer组件（如SkinnedMeshRenderer）使用的材质：
   • 确保材质的Render Queue设置为Geometry（默认值，不要修改为透明队列）
   • 无需额外修改材质的其他参数，保持正常的不透明渲染即可

步骤3：设置空间网格的遮挡材质与相机配置 #

1. 创建一个用于空间网格的遮挡材质：
   • 选择Unlit/Color shader，将颜色的Alpha值设为0（完全透明）
   • 在MRTK空间感知配置的Mesh Material选项中，选择这个透明材质（空间网格会不可见，但仍具备遮挡能力）
2. 调整主相机设置（路径：MRTK XR Rig > Camera Offset > Main Camera）：
   • 把Clear Flags设为Solid Color，颜色设置为透明（Alpha=0），避免背景覆盖空间网格
   • 忽略相机的Occlusion Culling复选框：这个是Unity传统静态场景的遮挡剔除功能，对HoloLens动态空间网格无效
   • 确认相机的Culling Mask包含虚拟角色所在层和SpatialMesh层，确保两者都能被相机识别

步骤4：测试与排查 #

运行应用后，HoloLens会扫描环境生成空间网格，此时移动虚拟角色到真实物体后方，即可看到被遮挡部分消失。若未生效：

• 临时将空间网格材质改为半透明颜色，确认真实物体位置已生成网格
• 检查虚拟角色的Renderer组件Visibility是否为Visible
• 确认空间网格的SpatialMesh层未被相机的Culling Mask排除

额外注意事项 #

• 性能优化：高精度空间网格会增加性能开销，测试后根据设备帧率调整Mesh Level Of Detail
• 动态更新：开启空间感知的Update Interval，让空间网格能实时同步真实环境变化，保证遮挡效果随真实物体移动而更新

内容的提问来源于stack exchange，提问作者somago