Unity实时摄像头人脸追踪及Snapchat风格面具滤镜实现咨询

1. 先搭摄像头实时画面基础 #

• 新建Unity项目，新手推荐选URP模板，适配性更强
• 用Plane做画面载体：创建一个Plane，调整大小铺满屏幕
• 写个简单脚本挂载到Plane上，获取摄像头画面：

  using UnityEngine;
  
  public class CameraFeed : MonoBehaviour
  {
      private WebCamTexture webCamTexture;
  
      void Start()
      {
          WebCamDevice[] devices = WebCamTexture.devices;
          if (devices.Length > 0)
          {
              webCamTexture = new WebCamTexture(devices[0].name);
              GetComponent<Renderer>().material.mainTexture = webCamTexture;
              webCamTexture.Play();
          }
      }
  
      void OnDestroy()
      {
          webCamTexture?.Stop();
      }
  }
  

• 注意：编辑器测试要允许摄像头权限，打包移动端得在PlayerSettings里开启摄像头权限

2. 集成人脸检测功能 #

直接用Unity官方的AR Foundation，免费还靠谱：

• 导入AR Foundation和对应平台的包（Android装ARCore，iOS装ARKit）
• 场景里加AR Session和AR Session Origin两个对象，给AR Session Origin加AR Face Manager组件，开启人脸追踪
• 这样AR Foundation会自动识别摄像头里的人脸，输出关键点和网格数据

3. 绑定面具模型到人脸 #

• 找个3D面具模型，新手可以去Asset Store搜免费的人脸面具资源，自己建模要贴合人脸拓扑
• 写脚本监听人脸检测事件，把面具挂到人脸对象上：

  using UnityEngine;
  using UnityEngine.XR.ARFoundation;
  
  public class FaceMaskHandler : MonoBehaviour
  {
      public ARFaceManager faceManager;
      public GameObject maskPrefab;
  
      void OnEnable()
      {
          faceManager.facesChanged += OnFacesChanged;
      }
  
      void OnDisable()
      {
          faceManager.facesChanged -= OnFacesChanged;
      }
  
      void OnFacesChanged(ARFacesChangedEventArgs args)
      {
          foreach (var face in args.added)
          {
              var mask = Instantiate(maskPrefab, face.transform);
              // 调整缩放和位置，贴合人脸，数值按需改
              mask.transform.localScale = new Vector3(0.01f, 0.01f, 0.01f);
              mask.transform.localPosition = new Vector3(0, 0, 0.05f);
          }
  
          foreach (var face in args.removed)
          {
              if (face.transform.childCount > 0)
              {
                  Destroy(face.transform.GetChild(0).gameObject);
              }
          }
      }
  }
  

• 调下面具材质，要么用半透明的，要么关闭背面剔除，别遮挡摄像头画面

4. 优化效果（可选） #

• 加表情驱动：用AR Face提供的Blend Shape权重，让面具跟着人脸表情动
• 提跟踪精度：在AR Face Manager里调高检测帧率
• 测多设备：分别在Android和iOS上测试权限和追踪效果

内容的提问来源于stack exchange，提问作者SloMo