FPGA部署H.264编码器：帧间预测的RAM资源疑问

YUV4:2:0格式的图像缓存最小尺寸 #

• 必须缓存完整的YUV 4:2:0分量，不能仅保留Y亮度分量。H.264帧间预测不仅需要Y分量做运动补偿，UV色度分量同样要进行运动预测（分辨率为Y的1/2），缺失UV分量会导致重建图像色彩失真，不符合标准要求。
• 以720p（1280×720）为例，缓存尺寸计算为：Y分量占1280×720字节，U、V分量各占(1280/2)×(720/2)=230400字节，总大小约1350KB，和你提到的数值一致。

能否用熵编码后的压缩图像作为参考缓存？ #

• 绝对不行。H.264帧间预测依赖重建后的像素数据（经反变换、去块滤波等步骤恢复的像素），熵编码后的压缩数据是符号流，不具备空间域像素信息，无法直接用于运动补偿的匹配、插值计算，必须解码重建才能作为参考帧。

RAM资源优化的可行方向 #

• 分块缓存：利用H.264宏块级处理特性，仅缓存当前处理所需的局部参考帧区域（比如当前宏块周边的几个宏块范围），而非整帧缓存。但需要复杂的地址管理和调度，确保运动补偿时能快速访问目标像素。
• 片外DDR扩展：若FPGA片内RAM不足，可将参考帧存储到片外DDR，通过高速接口（如AXI）访问。虽会增加少许延迟，但能大幅缓解片内RAM压力，这是FPGA视频编码的常规方案。
• 牺牲编码性能换资源：若资源极度紧张，可减少参考帧数量（比如仅保留1帧参考）、缩小运动搜索范围，间接降低缓存需求，但会导致编码效率下降。

内容的提问来源于stack exchange，提问作者Peter