如何将远程URL文件流式传输至Google Drive并验证传输方式

你可以通过以下几种方式验证代码是否真的在流式传输文件，而非先下载完整文件再上传：

1. 监控服务器内存占用 #

运行代码上传一个大文件（比如1GB以上），同时观察服务器的内存使用情况：

• 用系统工具：Linux/macOS用top命令，Windows打开任务管理器，查看Node.js进程的内存占用。如果内存始终维持在较低水平（比如几十MB），说明没有把整个文件加载到内存，是流式传输。
• 在代码中添加内存监控：在res的回调里加入打印逻辑：

  res.on('data', () => {
    const mem = process.memoryUsage();
    console.log(`Heap内存占用：${Math.round(mem.heapUsed / 1024 / 1024)} MB`);
  });
  

  如果日志显示内存没有随文件大小增长而飙升，即可确认是流式传输。

2. 跟踪数据传输时序 #

通过打印数据块日志或抓包，观察数据流动的顺序：

• 给res流添加data事件监听，打印每次接收的内容块：

  res.on('data', (chunk) => {
    console.log(`收到文件块：${chunk.length} 字节`);
  });
  

  同时查看Google Drive的上传进度条，如果日志输出和Drive的上传进度同步推进，说明服务器在边接收边上传。
• 用抓包工具（如Wireshark）监控网络流量：如果服务器同时与远程文件源、Google Drive保持持续的小数据包交互，就是流式传输；如果先出现从源下载的大流量，再出现上传到Drive的流量，就是先下载后上传。

3. 中断传输测试 #

上传大文件过程中，手动断开服务器与远程文件源的连接（比如临时屏蔽源域名、断开网络）：

• 如果Google Drive上最终生成的文件是部分内容（既不是空文件也不是完整文件），说明是流式上传——因为如果是先下载再上传，断开连接后服务器没有完整文件，Drive上不会有部分内容。

补充：你的代码小优化 #

另外注意，当前代码没有处理网络请求错误，建议给http/https.get添加错误监听，避免静默失败：

const req = (fileUrl.startsWith('https') ? https : http).get(fileUrl, async res => {
  // ... 现有逻辑
});
req.on('error', (err) => {
  console.error('获取远程文件失败：', err);
});

内容的提问来源于stack exchange，提问作者Pavindu