如何用Unreal蓝图将JSON中的BlendShapes驱动MetaHuman动画？

可行性结论 #

完全可行，Azure TTS输出的视位素BlendShapes数据可以直接映射到MetaHuman的面部驱动系统，Unreal蓝图足以完成数据解析、实时插值和动画驱动的全流程。

具体实现建议 #

1. 先修正JSON数据格式 #

你提供的animation.json存在语法错误，外层多了冗余大括号，且对象闭合逻辑有误，正确结构应为数组包裹的帧对象列表：

[
  {
    "Audio_offset": 20,
    "FrameIndex": 0,
    "BlendShapes": [
      [0.021, 0.321, ..., 0.258],
      [0.045, 0.234, ..., 0.288]
    ]
  },
  {
    "Audio_offset": 20,
    "FrameIndex": 1,
    "BlendShapes": [
      [0.021, 0.321, ..., 0.258],
      [0.045, 0.234, ..., 0.288]
    ]
  }
]

确保FrameIndex按动画帧顺序递增，避免后续解析出错。

2. 在Unreal中加载解析JSON数据 #

• 用蓝图的Read Json File节点读取本地JSON文件；如果做实时驱动，则通过WebSocket或HTTP请求接收Python服务推送的实时数据。
• 用Get Object Field和Get Array Field节点逐层解析，提取每个帧的FrameIndex、Audio_offset和BlendShapes数值数组。

3. 映射BlendShapes到MetaHuman面部 #

• MetaHuman的标准面部BlendShapes与Azure TTS输出的视位素索引一一对应，需核对两者的顺序（比如Viseme_0对应闭嘴状态，Viseme_1对应张嘴动作等）。
• 在蓝图中获取MetaHuman的Face Animation组件，通过Set Blend Shape Weight节点，将解析出的每个BlendShape数值对应到匹配的面部形状索引上。

4. 实现帧同步与平滑过渡 #

• 离线动画场景：按FrameIndex顺序逐帧设置BlendShape权重，完成后可在动画序列编辑器中导出为可复用的动画资产。
• 实时驱动场景：根据Audio_offset同步音频播放进度，对相邻帧的BlendShapes数值做线性插值，避免动画卡顿。用蓝图Timeline节点或自定义帧更新逻辑控制采样帧率（建议与Azure TTS输出帧率一致，比如30fps）。

5. 调试与性能优化 #

• 先做离线测试：加载静态JSON数据驱动MetaHuman，检查每个视位素对应的面部动作是否准确，调整权重映射索引。
• 实时场景下，优先用WebSocket推送数据，减少HTTP请求带来的延迟。
• 开启Unreal的Profiler工具监控动画更新性能，避免因频繁设置BlendShape导致帧率下降。

内容的提问来源于stack exchange，提问作者Cem Canbolat