PyTorch视频模型frame_length与sample_rate含义及使用问询
SlowFast模型命名中frame_length与sample_rate的含义及用法
以预训练模型命名slowfast_4x16_resnet50_kinetics400为例,其中的两个参数含义和用法如下:
- frame_length(4):指SlowFast模型的**慢路径(Slow Path)**最终输入的总帧数,也就是慢路径会用4帧来做特征提取。
- sample_rate(16):表示帧采样的间隔,即每隔16帧抽取1帧作为有效帧。
针对你提到的30FPS视频的情况:
你的理解是对的——需要从视频中按每16帧抽取1帧的规则,一共提取4帧作为慢路径的输入。
补充说明:SlowFast模型的快路径(Fast Path)会采用更高的采样频率(通常是慢路径采样率的1/8,比如这里快路径的采样率可能是2),抽取更多帧数但用更低的分辨率输入,和慢路径的特征融合后完成视频分类等任务,不过命名中的4x16仅对应慢路径的参数配置。
内容的提问来源于stack exchange,提问作者Joe
相关产品推荐
相关产品推荐

