Core Image中使用Alpha blending实现帧平均的方案咨询

完全可以通过Core Image原生Alpha Blending能力实现多帧平均效果，且能避免自定义CIKernel方案遇到的通道裁切问题。

你之前方案出现异常斑块的核心原因大概率是中间累加缓存使用了8位/通道的固定精度格式，浮点累加后数值超出0-1范围被强制截断，长期迭代后误差累积就会出现色块。使用原生Alpha混合搭配浮点工作缓存可以从根源上解决这个问题，且两种方案的数学效果完全等价。

实现原理 #

n帧画面平均的本质是每帧权重为1/n，递推实现时，若已经叠加了k帧，叠加第k+1帧时只需要给新帧设置1/(k+1)的透明度，用源Over模式叠加到历史累加结果上即可，计算结果和逐通道加权平均完全一致。

具体实现流程 #

• 第一步：初始化运行环境。创建和输入帧分辨率匹配的累加容器，同时指定CIContext的工作格式为kCIFormatRGBAf或kCIFormatRGBAhf浮点格式，避免中间计算出现精度截断。
• 第二步：初始化初始值。第一帧直接作为初始累加结果，累计计数设为1。
• 第三步：逐帧计算混合参数。每拿到新的输入帧时，根据当前累计帧数计算新帧的透明度：alpha = 1.0 / (累计帧数 + 1.0)。
• 第四步：执行混合操作。先给新帧应用计算得到的透明度，再用源Over混合模式叠加到历史累加结果上，将输出作为新的累加结果。
• 第五步：更新计数，重复第三步到第四步直到所有待叠加帧处理完成，最终累加结果就是多帧平均后的运动模糊效果图。

核心代码示例 #

// 初始化全局参数
var accumulatedImage: CIImage?
var stackCount = 0
// 明确指定浮点工作格式避免裁切
let ciContext = CIContext(options: [.workingFormat: CIFormat.RGBAf])

// 单帧处理逻辑
func processNewFrame(_ newFrame: CIImage) {
    guard let accumulated = accumulatedImage else {
        // 第一帧直接作为初始累加值
        accumulatedImage = newFrame
        stackCount = 1
        return
    }
    // 计算当前新帧的混合透明度
    let alpha = 1.0 / Double(stackCount + 1)
    // 生成alpha遮罩层
    guard let alphaGenerator = CIFilter(name: "CIConstantColorGenerator", parameters: [
        kCIInputColorKey: CIColor(red: 1, green: 1, blue: 1, alpha: alpha)
    ]), let alphaMask = alphaGenerator.outputImage else { return }
    // 给新帧应用透明度
    guard let multiplyFilter = CIFilter(name: "CIMultiplyCompositing", parameters: [
        kCIInputImageKey: alphaMask,
        kCIInputBackgroundImageKey: newFrame
    ]), let alphaFrame = multiplyFilter.outputImage else { return }
    // 叠加到历史累加结果
    guard let blendFilter = CIFilter(name: "CISourceOverCompositing", parameters: [
        kCIInputImageKey: alphaFrame,
        kCIInputBackgroundImageKey: accumulated
    ]), let blendedResult = blendFilter.outputImage else { return }
    // 更新累加缓存和计数
    accumulatedImage = blendedResult
    stackCount += 1
}

该方案全程使用Core Image原生滤镜实现，不需要自定义核函数，系统会自动做硬件加速优化，同时浮点精度的中间缓存可以彻底避免通道裁切导致的色块问题。

内容的提问来源于stack exchange，提问作者Salvo89