使用AVAssetReader/AVSampleBufferDisplayLayer时如何强制GPU处理视频解码？

核心原因 #

你遇到的VTDecoderXPCService高CPU占用，核心不是样本拷贝本身，而是重复解码同一帧。虽然你缓存了原始样本，但每次用CMSampleBufferCreateCopyWithNewTiming生成时序副本时，系统解码器可能无法识别这是同一帧的复用，会反复触发硬件解码流程——即使M1的VT解码是硬件加速，频繁的解码上下文切换和重复操作也会导致XPC服务的CPU占用飙升。

解决方案 #

方案1：复用原始压缩样本，避免重复解码

不需要每次循环都创建新的CMSampleBuffer，仅调整展示时序，同时保留原始样本的解码上下文：

• 缓存所有原始的压缩CMSampleBuffer（第一次读取时完成）。
• 循环播放时，调用CMSampleBufferCreateCopyWithNewTiming仅修改presentationTimeStamp，保持decodeTimeStamp不变。解码器会识别到这是同一帧的不同展示时间，直接复用已解码的帧数据，不会触发重复解码。
• 注意：不要修改样本的格式描述（CMFormatDescription），确保解码器能复用之前的解码会话。

方案2：缓存已解码帧，彻底跳过重复解码

只做一次解码操作，之后循环渲染已解码的帧，完全避免解码器重复工作：

1. 首次读取样本时，用VTDecompressionSession手动将压缩的CMSampleBuffer解码为CVImageBuffer，缓存这些已解码的帧（注意用CVBufferRetain管理内存）。
2. 循环播放时，将缓存的CVImageBuffer重新包装为CMSampleBuffer（仅设置正确的presentationTimeStamp），提交给AVSampleBufferDisplayLayer。此时GPU直接渲染已解码的帧，解码器不再工作，CPU占用会大幅下降。

伪代码示例：

// 解码并缓存已解码帧
VTDecompressionSessionRef decompressionSession;
// 初始化VTDecompressionSession...
CMSampleBufferRef rawSample = [readerOutput copyNextSampleBuffer];
CVImageBufferRef decodedBuffer = CMSampleBufferGetImageBuffer(rawSample);
CVBufferRetain(decodedBuffer);
[self.cachedFrames addObject:(__bridge id)decodedBuffer];
CFRelease(rawSample);

// 循环时包装为可提交的CMSampleBuffer
CVImageBufferRef cachedBuffer = (__bridge CVImageBufferRef)[self.cachedFrames objectAtIndex:currentFrameIdx];
CMTime presentationTime = CMTimeMakeWithSeconds(currentPlayTime, 600);
CMSampleTimingInfo timing = {.presentationTimeStamp = presentationTime, .decodeTimeStamp = kCMTimeInvalid, .duration = kCMTimeZero};
CMFormatDescriptionRef formatDesc = CMVideoFormatDescriptionCreateForImageBuffer(kCFAllocatorDefault, cachedBuffer);
CMSampleBufferRef displaySample;
CMSampleBufferCreateForImageBuffer(kCFAllocatorDefault, cachedBuffer, YES, NULL, NULL, formatDesc, &timing, &displaySample);
[self.displayLayer enqueueSampleBuffer:displaySample];
CFRelease(displaySample);
CFRelease(formatDesc);

方案3：修复AVPlayer的循环卡顿问题

回到AVPlayer方案，利用系统优化的播放器逻辑解决卡顿，这是最省心的选择：

• 监听AVPlayerItemDidPlayToEndTimeNotification，在播放结束时零容差跳转到开头，避免延迟：

[[NSNotificationCenter defaultCenter] addObserver:self selector:@selector(onPlayEnd:) name:AVPlayerItemDidPlayToEndTimeNotification object:self.playerItem];

- (void)onPlayEnd:(NSNotification *)note {
    [self.player seekToTime:kCMTimeZero toleranceBefore:kCMTimeZero toleranceAfter:kCMTimeZero];
    [self.player play];
}

• 同时可以尝试关闭AVPlayer的automaticallyWaitsToMinimizeStalling属性，优化短视频的循环流畅度。

内容的提问来源于stack exchange，提问作者jnorris