iOS应用能否直接将视频帧渲染到AirPlay？实时推流CMSampleBuffers可行吗？

结论：可以实现，无需依赖HLS协议，直接通过AVFoundation的组件就能完成本地实时生成视频帧的AirPlay推流，和你已知的音频方案逻辑一致。

核心组件与实现步骤 #

• 视频部分使用AVSampleBufferVideoRenderer，和你提到的AVSampleBufferAudioRenderer配合，共同接入AVSampleBufferRenderSynchronizer实现音视频同步推流。
• 具体流程：
  1. 初始化同步与渲染组件
     • 创建AVSampleBufferRenderSynchronizer实例，用于统一管理音视频的播放同步
     • 实例化AVSampleBufferVideoRenderer，并将其outputContext配置为目标AirPlay设备的输出上下文
     • 将视频渲染器和已有的音频渲染器都添加到同步器中
  2. 绑定AirPlay输出设备
     • 通过系统AVOutputContext获取可用的AirPlay输出设备，将其设置为视频渲染器的输出目标
     • 确保渲染器的输出上下文正确指向选中的AirPlay设备，而非本地屏幕
  3. 推送实时生成的CMSampleBuffer
     • 为本地生成的视频帧设置准确的CMTime时间戳，需与音频帧时间戳保持同步
     • 调用AVSampleBufferVideoRenderer.enqueue(_:)将视频帧加入渲染队列，音频帧通过AVSampleBufferAudioRenderer.enqueue(_:)推送
     • 同步器会自动处理音视频同步，并将渲染后的内容实时推送到AirPlay设备

关键注意事项 #

• 视频帧编码格式需兼容AirPlay，推荐使用H.264编码的CMSampleBuffer，同时确保分辨率、帧率符合目标设备的支持范围
• 时间戳必须精准匹配播放节奏，否则会出现音视频不同步、卡顿甚至无法播放的问题
• 需监听AirPlay设备的连接状态变化，及时切换渲染器的输出目标，避免播放中断
• 控制本地帧生成速度与播放帧率匹配，防止渲染队列溢出或空队列导致的播放异常

内容的提问来源于stack exchange，提问作者Anton