如何使用IMFMediaEngine实现两个区域或窗口同步播放同一段视频

是否需要使用帧服务器模式 #

必须使用帧服务器模式。渲染模式本身仅绑定单一输出窗口或DirectComposition视觉对象，天然不支持多路输出；只有帧服务器模式会跳过内部渲染管线，将解码后的视频帧以可复用的IMFMediaBuffer/IMFSample形式暴露给上层，才能自主分发到多个渲染目标。

帧服务器模式双路输出实现步骤 #

• 初始化帧服务器模式实例
  调用IMFMediaEngineClassFactory::CreateInstance时传入MF_MEDIA_ENGINE_FRAME_SERVER_MODE标志，不要传入任何HWND或DirectComposition相关的初始化参数，禁用内部渲染逻辑。
• 注册帧就绪回调
  实现IMFMediaEngineNotify接口，监听MF_MEDIA_ENGINE_EVENT_FRAME_READY事件，该事件会在每一帧解码完成、可被获取时触发。
• 帧数据分发与多路渲染
  每次收到帧就绪事件后，调用IMFMediaEngine::GetVideoSample获取当前解码完成的视频帧IMFSample，将该样本的引用计数加1后分别投递到两个独立的渲染队列：
  • 可使用两个独立的ID2D1DeviceContext实例分别绑定两个窗口的渲染目标，将视频帧作为位图绘制到对应区域
  • 也可以直接投递到两个独立的DirectComposition视觉对象做硬件加速渲染
• 同步播放控制
  所有播放操作（暂停、快进、音量调节等）统一调用全局的IMFMediaEngine实例接口，两个渲染端只负责帧绘制，不需要单独控制播放逻辑，天然保证播放同步。

注意：帧服务器模式下不会自动做帧同步，你需要根据IMFSample上携带的时间戳和当前播放时钟的进度，控制每一帧的渲染时机，避免出现画面卡顿或速度异常。

异步输出避免主线程中断的实现方案 #

• 单独创建一个工作者线程负责驱动IMFMediaEngine的事件循环，所有IMFMediaEngine的核心接口调用（除了线程安全的播放控制接口）都放在这个线程执行，避免和主线程的UI消息队列耦合。
• 两个渲染端各自维护独立的无锁帧队列，工作者线程拿到解码帧后只负责往两个队列push帧，渲染逻辑由各自窗口的渲染线程/UI线程从队列取帧绘制，不要在工作者线程做耗时的渲染操作。
• 可以通过IMFMediaEngineEx::SetWindowless配合自定义的帧调度逻辑，实现完全脱离主线程的帧获取和分发，哪怕主线程阻塞也不会影响视频解码和帧投递逻辑。

内容的提问来源于stack exchange，提问作者Alex7