如何将MediaExtractor采样转换为完整Bitmap以解决视频降帧失真问题

问题根源说明 #

你当前的逻辑错误是直接操作编码后的视频采样帧，H.264/AVC等编码格式的P帧、B帧依赖前面的参考帧才能正常解码，直接丢弃编码帧会导致后续帧缺失参考信息，必然出现花屏、失真问题。你规划的「解码抽帧→重新编码」路径是完全可行的，以下是具体实现方案：

实现方案 #

1. 低代码快速实现（适合短视频场景） #

直接调用系统MediaMetadataRetrieverAPI，按你计算的目标时间戳直接提取完整Bitmap，不需要手动处理解码逻辑：

MediaMetadataRetriever retriever = new MediaMetadataRetriever();
retriever.setDataSource(yourVideoFilePath);
long durationUs = Long.parseLong(retriever.extractMetadata(MediaMetadataRetriever.METADATA_KEY_DURATION)) * 1000;
long frameIntervalUs = 1000000 / targetFrameRate; // 目标帧率对应的帧间隔，单位微秒

for (long targetTimeUs = 0; targetTimeUs < durationUs; targetTimeUs += frameIntervalUs) {
    // OPTION_CLOSEST会获取最接近目标时间的完整帧，不限制为关键帧，精度更高
    Bitmap frameBitmap = retriever.getFrameAtTime(targetTimeUs, MediaMetadataRetriever.OPTION_CLOSEST);
    // 此处添加你的Bitmap存储/处理逻辑
}
retriever.release();

该方案代码量极小，后台运行无需考虑耗时的话完全可以满足需求。

2. 高性能批量处理（适合长视频/大文件场景） #

如果要处理长视频，建议用MediaExtractor + MediaCodec的解码链路，比逐次调用MediaMetadataRetriever效率高得多：

• 保留你原来的时间戳筛选逻辑，但是不要直接丢弃编码采样
• 所有编码采样正常喂给MediaCodec解码器，解码器会自动处理所有参考帧的依赖关系，不会出现解码错误
• 仅在解码输出原始帧的环节，筛选时间戳符合目标间隔的帧保留，其余解码后的原始帧直接丢弃即可
• 解码输出的原始YUV帧可以直接转Bitmap，也可以直接喂给后续的AVC编码器，省去Bitmap转换的性能开销

后续编码注意事项 #

你拿到所有保留的原始帧后，直接喂给配置了AVC格式的MediaCodec编码器，设置对应的目标帧率、分辨率、码率参数即可。因为是完全重新生成的编码流，所有参考帧都来自你保留的帧序列，不会出现之前的依赖错误导致的失真问题。

内容的提问来源于stack exchange，提问作者Arvin Akhavan