Android ML Kit人脸检测：快速移动相机时误识别非人脸问题求助

相机快速移动时，帧画面容易出现模糊、拖影，ML Kit默认的快速检测模式倾向于优先速度而非精度，加上旧帧堆积未及时丢弃，就容易出现非人脸误识别的情况。可以从以下几个方向调整解决：

1. 调整人脸检测器的精度配置 #

默认的检测器配置偏向实时性，切换到高精度模式，同时设置最小人脸尺寸过滤微小误检测区域：

val options = FaceDetectorOptions.Builder()
    .setPerformanceMode(FaceDetectorOptions.PERFORMANCE_MODE_ACCURATE)
    .setMinFaceSize(0.15f) // 只检测占画面15%以上的人脸
    .enableTracking() // 启用追踪，减少帧间的误判波动
    .enableClassification() // 启用特征分类，用于后续过滤
    .build()

val detector = FaceDetection.getClient(options)

2. 优化ImageAnalysis的帧处理策略 #

避免处理堆积的旧帧，限制帧率减少模糊帧的传入：

val imageAnalysis = ImageAnalysis.Builder()
    .setTargetResolution(Size(1280, 720)) // 适配合适的分辨率，平衡速度和精度
    .setBackpressureStrategy(ImageAnalysis.STRATEGY_KEEP_ONLY_LATEST) // 只保留最新帧，丢弃旧的模糊帧
    .setTargetFps(15) // 限制帧率，避免过度处理
    .build()

3. 增加误识别过滤逻辑 #

在获取检测结果后，通过人脸特征（如眼睛、嘴巴的置信度、头部角度）过滤不符合条件的结果：
修改你的analyze方法中的结果处理部分：

override fun analyze(imageProxy: ImageProxy) {
    val t1 = System.currentTimeMillis()

    val btm = imageProxy.toBitmap() ?: return
    val image: InputImage = InputImage.fromBitmap(btm, imageProxy.imageInfo.rotationDegrees)
    detectInImage(image)
        .addOnSuccessListener { results ->
            // 过滤掉置信度低、特征不全的结果
            val validFaces = results.filter { face ->
                // 头部角度在合理范围，避免极端角度误判
                val angleY = face.headEulerAngleY
                angleY in -30f..30f &&
                // 眼睛存在且置信度达标
                (face.leftEyeOpenProbability ?: 0f) > 0.5f &&
                (face.rightEyeOpenProbability ?: 0f) > 0.5f
            }

            val rotated = btm.rotateBitmap(imageProxy.imageInfo.rotationDegrees)
            rotated?.let {
                onFacesDetected(validFaces, it)
                onOutlineDetected(validFaces, Rect(0,0, btm.width, btm.height))
            }
        
            imageProxy.close()
        }
        .addOnFailureListener {
            onFailure(it)
            imageProxy.close()
        }
}

额外提示 #

• 避免在主线程处理Bitmap转换和检测后的UI操作，尽量把耗时逻辑放到后台线程
• 如果设备性能允许，可以对传入的Bitmap做简单的模糊检测，过滤掉过度模糊的帧再进行人脸检测

内容的提问来源于stack exchange，提问作者saas