AVAssetImageGenerator帧偏离目标时间，如何实现每秒提取10帧？

嘿，我来帮你搞定这个视频帧提取的偏差问题！你遇到的情况其实是AVAssetImageGenerator的默认行为导致的——它默认会优先返回最近的关键帧，而不是你指定的精确时间点，所以才会出现时间偏差。要实现每秒提取10帧的精确需求，咱们可以这么调整：

关键修正点 #

• 强制要求精确时间帧：关闭关键帧偏好，让生成器严格按照你指定的时间提取帧
• 精确计算时间戳：每秒10帧意味着每帧间隔0.1秒，用更精准的时间刻度构造CMTime

修正后的完整代码 #

import AVFoundation

func extractFramesFromVideo(asset: AVAsset, framesPerSecond: Int = 10) {
    let imageGenerator = AVAssetImageGenerator(asset: asset)
    imageGenerator.appliesPreferredTrackTransform = true
    
    // 关键设置：强制获取精确时间的帧，不使用最近关键帧
    imageGenerator.requestedTimeToleranceBefore = .zero
    imageGenerator.requestedTimeToleranceAfter = .zero
    
    // 计算视频总时长（秒）
    let videoDuration = CMTimeGetSeconds(asset.duration)
    let totalFrames = Int(videoDuration * Double(framesPerSecond))
    
    // 生成所有需要提取的时间点
    var times = [NSValue]()
    for i in 0..<totalFrames {
        // 每帧间隔 = 1/framesPerSecond 秒，用600作为时间刻度（常用高精度刻度）
        let timeInSeconds = Double(i) / Double(framesPerSecond)
        let time = CMTimeMakeWithSeconds(timeInSeconds, preferredTimescale: 600)
        times.append(NSValue(time: time))
    }
    
    // 异步生成图片
    imageGenerator.generateCGImagesAsynchronously(forTimes: times) { (requestedTime, imageRef, actualTime, result, error) in
        defer {
            // 记得释放CGImageRef，避免内存泄漏
            if let imageRef = imageRef {
                CGImageRelease(imageRef)
            }
        }
        
        switch result {
        case .succeeded:
            guard let imageRef = imageRef else { return }
            // 这里处理提取到的图片，比如转成UIImage保存
            let image = UIImage(cgImage: imageRef)
            print("成功提取时间点：\(CMTimeGetSeconds(requestedTime))s，实际时间：\(CMTimeGetSeconds(actualTime))s")
            // 后续可以添加保存图片的逻辑
        case .failed:
            print("提取失败，错误：\(error?.localizedDescription ?? "未知错误")")
        case .cancelled:
            print("提取任务被取消")
        }
    }
}

额外注意事项 #

• 如果视频时长较长，一次性生成大量帧可能会占用过多内存，建议分批次处理
• 部分视频编码可能存在无法提取某些时间点帧的情况，需要做好错误处理
• preferredTimescale设置为600是因为它是很多视频格式的常用时间刻度，能减少浮点计算带来的误差

内容的提问来源于stack exchange，提问作者Андрей Первушин