基于C#和XAML的UWP应用：IP摄像头人脸检测连接问题求助

我之前刚好做过类似的需求，把微软官方人脸检测示例里的内置摄像头换成IP摄像头，核心其实是解决IP摄像头视频流的获取与人脸检测API的对接问题，下面是具体的实现思路和实操步骤：

一、先搞定IP摄像头的视频流地址 #

首先得确认你的IP摄像头对外提供的视频流格式，常见的有两种：

• RTSP流：格式一般是 rtsp://[用户名]:[密码]@[摄像头IP]:[端口]/流路径，比如 rtsp://admin:123456@192.168.1.100:554/main
• HTTP MJPEG流：格式通常是 http://[摄像头IP]:[端口]/cgi-bin/mjpeg.cgi这类

你可以先在VLC播放器里测试这个地址，能正常播放再进行下一步，避免后续踩坑。

二、在UWP中加载IP摄像头的视频流 #

官方示例用的是MediaCapture调用本地摄像头，换成IP摄像头的话，我们可以用MediaPlayer来拉取网络流，获取视频帧的渲染表面：

private MediaPlayer _ipCameraPlayer;
private MediaPlayerSurface _playerSurface;

// 初始化IP摄像头流
private async Task SetupIPCameraStream(string streamUrl)
{
    _ipCameraPlayer = new MediaPlayer();
    // 设置流地址
    _ipCameraPlayer.Source = MediaSource.CreateFromUri(new Uri(streamUrl));
    // 开始播放
    _ipCameraPlayer.Play();

    // 获取视频渲染表面，绑定到XAML的Image控件显示画面
    _playerSurface = MediaPlayerSurface.CreateFromMediaPlayer(_ipCameraPlayer);
    cameraPreviewImage.Source = _playerSurface;
}

记得在XAML里添加一个用于预览的Image控件，比如命名为cameraPreviewImage。

三、对接人脸检测API，实现实时检测 #

官方示例是从MediaCapture的帧事件里取帧，现在我们需要定期从MediaPlayer捕获当前帧，转换成FaceDetector支持的格式后传入检测：

1. 先初始化FaceDetector（和官方示例逻辑一致）：

private FaceDetector _faceDetector;

private async Task InitializeFaceDetector()
{
    var faceDetectorAvailable = await FaceDetector.IsSupportedAsync();
    if (!faceDetectorAvailable)
    {
        // 处理设备不支持人脸检测的情况
        return;
    }
    _faceDetector = await FaceDetector.CreateAsync();
}

2. 编写帧捕获与检测的方法：

private async Task DetectFacesFromIPCameraFrame()
{
    if (_ipCameraPlayer == null || _faceDetector == null) return;

    // 捕获当前视频帧
    using (var videoFrame = await _ipCameraPlayer.CapturePhotoToVideoFrameAsync())
    {
        if (videoFrame.SoftwareBitmap == null) return;

        // 转换为FaceDetector支持的灰度格式（Gray8），提升检测效率
        using (var inputBitmap = SoftwareBitmap.Convert(videoFrame.SoftwareBitmap, BitmapPixelFormat.Gray8))
        {
            // 执行人脸检测
            var faceResults = await _faceDetector.DetectAsync(inputBitmap);
            
            // 这里复用官方示例的人脸框绘制逻辑即可
            DrawFaceBoundingBoxes(faceResults);
        }
    }
}

3. 用DispatcherTimer定时调用检测方法，实现实时检测：

private DispatcherTimer _detectionTimer;

private void SetupDetectionTimer()
{
    _detectionTimer = new DispatcherTimer();
    _detectionTimer.Interval = TimeSpan.FromMilliseconds(30); // 约30帧/秒
    _detectionTimer.Tick += async (s, e) => await DetectFacesFromIPCameraFrame();
    _detectionTimer.Start();
}

四、权限与兼容性注意事项 #

• 网络权限：在Package.appxmanifest里添加internetClient权限，因为要访问网络流：

<Capabilities>
    <Capability Name="internetClient" />
</Capabilities>

• 流格式兼容：如果RTSP流无法被MediaPlayer直接识别，可以集成FFmpegInteropX库来解码，它对各种视频流格式的支持更好。
• 身份验证：如果摄像头需要登录，一定要在流地址里带上用户名和密码，不然会无法访问。

内容的提问来源于stack exchange，提问作者Le Quang Hoan