Javascript使用AWS多部分上传从浏览器上传7GB视频的Blob处理与请求配置问题
核心结论
完全不需要通过FileReader生成ArrayBuffer或二进制字符串,切分得到的Blob对象可以直接作为axios请求的载荷传入,完全符合S3多部分上传接口的请求要求。
具体实现说明
data字段的直接赋值方案
直接将切分完成的分片Blob对象传入即可。例如将第一片分片存在part1变量中,直接写data: part1就可以正常发起请求。
浏览器原生的XHR请求机制本身支持直接发送Blob类型数据,会自动以流式方式从磁盘读取分片内容往网络通道传输,不会将整个5GB的分片一次性加载到JS内存中,内存占用远低于手动转格式的方案。如果强行用FileReader读取大Blob,反而会将整段内容加载到内存,极易触发浏览器进程内存溢出、页面崩溃。现有代码需要修正的几处问题
- 格式不合法的
Content-Type:当前代码写的'video/'是无效值,分片本身是原始二进制块,不需要强制设置视频类型,直接移除该头即可,避免触发服务端校验异常。 - 不符合AWS规范的
x-amz-date值:new Date().toISOString()生成的字符串带有横杠、冒号分隔符,不符合AWS要求的紧凑UTC日期格式,会直接导致签名校验失败。正确的格式需要调整为YYYYMMDDTHHMMSSZ的固定结构,通过对ISO字符串做简单的字符替换即可生成。 - 分片大小选择不合理:当前选5GB作为分片大小刚好卡到S3单分片的上限值,一旦传输过程中遇到网络波动需要重试,就要重传整段5GB内容,重试成本极高。通常推荐将分片大小设置为100MB-500MB,7GB文件拆分后仅需十余个分片,断连重试的开销极小。
- 格式不合法的
签名配置的合理性
你当前设置的x-amz-content-sha256: 'UNSIGNED-PAYLOAD'是适配大文件上传的正确配置,该配置下S3不会校验请求载荷的SHA256哈希值,直接直传Blob不会出现签名不匹配的问题。
常见误区纠正:很多开发者误以为必须将Blob转为ArrayBuffer才能发起请求,实际上axios底层基于XHR实现的发送逻辑,原生支持Blob作为
send()方法的入参,会自动计算并设置正确的Content-Length请求头,完全满足S3接口对请求大小的校验要求。
内容的提问来源于stack exchange,提问作者John Durand
相关产品推荐
相关产品推荐

