使用cvzone同时检测人脸与手部的误判问题求助

使用cvzone库同时进行人脸与手部检测时，设定检测到2只手时屏幕变白，但仅抬起1只手时，偶尔会被误判为2只手，导致屏幕反复变白又恢复。

针对手部检测的误判问题，可从以下几个方面优化：

1. 提高检测与跟踪的置信度阈值 #

当前HandDetector的detectionCon=0.5和minTrackCon=0.5阈值较低，容易把模糊轮廓误判为手。适当提高这两个值，过滤低置信度的检测结果：

detector = HandDetector(staticMode=False, maxHands=2, modelComplexity=1, 
                        detectionCon=0.7, minTrackCon=0.7)

2. 添加帧防抖机制 #

单帧检测容易出现误判，添加连续帧验证：只有连续N帧都检测到2只手时，才触发白屏，避免单次误判导致的闪屏。

新增防抖相关变量：

# 新增防抖变量
hand_detection_counter = 0
required_consecutive_frames = 3  # 需要连续3帧检测到2只手才触发

3. 过滤无效的手检测结果 #

检查每只检测到的手的关键点数量，只有关键点数量足够的才视为有效手（一只手标准有21个关键点，可设阈值为15）：

# 过滤关键点不足的无效手
valid_hands = [hand for hand in hands if len(hand["lmList"]) >= 15]

4. 修复原代码逻辑错误 #

原代码中检测到2只手时，存在多余的else分支会将handWiteImageMode强制设回False，导致逻辑混乱，需删除该错误分支。

import cvzone
from cvzone.HandTrackingModule import HandDetector
from cvzone.FaceDetectionModule import FaceDetector
from cvzone.ClassificationModule import Classifier
from cvzone.PoseModule import PoseDetector
import pyautogui
import cv2
import numpy as np
import time
import mediapipe 
from cvzone.FPS import FPS
import os
import math
import csv
import time

############# 变量定义 ################################################################################################
# wCam, hCam = 640, 480
wCam, hCam = 1280, 720
cap = cv2.VideoCapture(0)
cap.set(3, wCam)
cap.set(4, hCam)
imageNumber = 0
# 定义要叠加在主屏幕上的摄像头图像尺寸
hs, ws = int(120 * 1), int(150 * 1) 
# 演示图像模式
presnterImageMode = True
# 多脸检测时白屏模式
faceWhiteImageMode = False
# 多手检测时白屏模式
handWiteImageMode = False
# 指定演示用手类型
handType = 'Left'
# 新增防抖变量
hand_detection_counter = 0
required_consecutive_frames = 3  # 连续3帧检测到2只手才触发白屏

####################################### 检测器初始化 #############################################################################
# 提高检测与跟踪置信度，减少误判
detector = HandDetector(staticMode=False, maxHands=2, modelComplexity=1, 
                        detectionCon=0.7, minTrackCon=0.7)   
face_detector = FaceDetector(minDetectionCon=0.5, modelSelection=0)
############################################################################################################################
# 导入演示图片
folderPath = 'presentaion/'
presnetaionPath = sorted(os.listdir(folderPath), key=len)

while True:
    _, frame = cap.read()
    frame = cv2.flip(frame, 1)
    frame = cv2.resize(frame, (wCam, hCam))
    currentImagePath = os.path.join(folderPath, presnetaionPath[imageNumber])
    currentImage = cv2.imread(currentImagePath)
    
    # 人脸检测
    frame, bboxs = face_detector.findFaces(frame, draw=False)
    if bboxs:
        if len(bboxs) > 1:
            faceWhiteImageMode = True
            frame = np.ones_like(frame)*255
            currentImage = np.ones_like(currentImage)*255
            cvzone.putTextRect(currentImage, f' 检测到多张人脸，应用已暂停 ',\
                                (0, 100), border=5, scale=2, thickness=2)
        else:   
            faceWhiteImageMode = False
            for bbox in bboxs:
                facecenter = bbox["center"]
                x, y, w, h = bbox['bbox']
            # 绘制人脸中心水平线，辅助演示控制
            cv2.line(frame, (0, facecenter[1]), (wCam, facecenter[1]), (0, 255, 0), 10)
    
    # 手部检测（仅在未触发人脸白屏时执行）
    if not faceWhiteImageMode:
        hands, _ = detector.findHands(frame, draw=False, flipType=True)
        if hands:
            # 过滤关键点不足的无效手，减少误判
            valid_hands = [hand for hand in hands if len(hand["lmList"]) >= 15]
            if len(valid_hands) > 1:
                hand_detection_counter += 1
                # 连续达到指定帧数才触发白屏
                if hand_detection_counter >= required_consecutive_frames:
                    handWiteImageMode = True
            else:
                # 检测到少于2只手时，重置计数器并关闭白屏
                hand_detection_counter = 0
                handWiteImageMode = False

        else:
            # 未检测到手时，重置计数器并关闭白屏
            hand_detection_counter = 0
            handWiteImageMode = False
    
    # 根据白屏模式状态更新画面
    if handWiteImageMode:
        frame = np.ones_like(frame)*255
        currentImage = np.ones_like(currentImage)*255
        cvzone.putTextRect(currentImage, f' 检测到多只手，应用已暂停 ', 
                            (0, 100), border=5, scale=2, thickness=2)
    
    # 叠加PNG图片
    imgPNG = cv2.imread("C:/Users/Geka/Desktop/update.png", cv2.IMREAD_UNCHANGED)
    imgOverlay = cvzone.overlayPNG(currentImage, imgPNG, pos=[0, 650])
    cv2.imshow('imagePresntaion ', frame)
    
    # 按键控制退出
    key = cv2.waitKey(10)
    if key == ord('q'):
        break

cap.release()
cv2.destroyAllWindows() 

内容的提问来源于stack exchange，提问作者Ahmed Gaber