如何从PKCanvasView识别手写文本并解决Vision框架无响应问题？

我完全懂你现在的困扰——从PKCanvasView导出的手写图像，用Vision框架识别居然毫无反应，连个错误提示都没有，排查起来真的挠头。咱们一步步拆解问题，先解决图像获取的核心问题，再修复Vision识别的配置漏洞。

首先，你可能没正确获取PKCanvasView的手写内容 #

很多人会直接用drawHierarchy来截图，但PKCanvasView的手写内容存在drawing属性里，正确的导出方式应该用专门的API，这样才能拿到纯手写的清晰图像，避免混入UI元素或者缩放错误：

func getHandwritingImage(from canvasView: PKCanvasView) -> CGImage? {
    let bounds = canvasView.bounds
    let scale = UIScreen.main.scale
    // 用PKDrawing的image方法导出纯手写内容
    let uiImage = canvasView.drawing.image(from: bounds, scale: scale)
    return uiImage.cgImage
}

然后，你的Vision代码存在几个关键配置错误 #

咱们逐个修正：

1. 识别级别选错了：你用了.fast，这个是给印刷体优化的，手写文本必须用.accurate才能触发正确的识别逻辑。
2. 没设置图像方向：Vision对图像方向极其敏感，PKCanvasView的图像方向和设备屏幕方向绑定，必须手动传入正确的方向参数，不然Vision会把图像当成默认的向上方向，识别不到内容。
3. 候选数设置不合理：设100个候选完全没必要，手写识别取top 1就足够，浪费资源还可能导致混乱。
4. 变量捕获可以更清晰：原来的tmp变量在闭包内外来回赋值，虽然不是致命问题，但整理后代码更易维护。

修复后的完整识别代码 #

func recognizeHandwrittenText(from cgImage: CGImage) -> String {
    var recognizedText = ""
    
    let textRecognitionRequest = VNRecognizeTextRequest { request, error in
        // 先处理错误
        guard error == nil else {
            print("Vision请求出错：\(error!.localizedDescription)")
            return
        }
        
        // 确保拿到正确的识别结果类型
        guard let observations = request.results as? [VNRecognizedTextObservation] else {
            print("没有找到有效的文本识别结果")
            return
        }
        
        // 遍历每个识别区域，取最准确的候选文本
        for observation in observations {
            guard let topCandidate = observation.topCandidates(1).first else {
                continue
            }
            recognizedText += topCandidate.string + "\n"
        }
    }
    
    // 关键：用精准模式识别手写
    textRecognitionRequest.recognitionLevel = .accurate
    // 设置识别语言（比如需要中文就加"zh-Hans"）
    textRecognitionRequest.recognitionLanguages = ["en-US"]
    // 开启语言修正，提升手写识别准确率
    textRecognitionRequest.usesLanguageCorrection = true
    
    // 关键：传入正确的图像方向
    let imageOrientation = UIDevice.current.orientation.imageOrientation
    let requestHandler = VNImageRequestHandler(cgImage: cgImage, 
                                               orientation: imageOrientation, 
                                               options: [:])
    
    do {
        try requestHandler.perform([textRecognitionRequest])
    } catch {
        print("执行Vision请求失败：\(error.localizedDescription)")
    }
    
    // 去掉首尾的空白字符
    return recognizedText.trimmingCharacters(in: .whitespacesAndNewlines)
}

// 辅助扩展：把设备方向转换成Vision需要的CGImagePropertyOrientation
extension UIDeviceOrientation {
    var imageOrientation: CGImagePropertyOrientation {
        switch self {
        case .portrait: return .right
        case .portraitUpsideDown: return .left
        case .landscapeLeft: return .up
        case .landscapeRight: return .down
        default: return .right
        }
    }
}

怎么调用？ #

假设你有一个PKCanvasView实例叫canvasView，直接这样用就行：

if let handwritingImage = getHandwritingImage(from: canvasView) {
    let resultText = recognizeHandwrittenText(from: handwritingImage)
    print("识别结果：\n\(resultText)")
    // 这里可以把结果显示到你的UI控件里，比如UILabel
} else {
    print("无法获取手写图像，请检查PKCanvasView的配置")
}

为什么之前的代码没反应？ #

总结下来就是两个核心问题：

• 图像获取方式错误，导致Vision拿到的不是有效手写内容；
• Vision的配置缺失了图像方向和正确的识别级别，相当于让Vision“看”错了方向，还用了不适合手写的识别模式，自然识别不到任何内容。

内容来源于stack exchange