如何提升SnowSQL从本地导入文件至internal stage的速度

问题1：能否通过CMD运行并行SnowSQL实例实现往不同stage并行传输文件 #

该方案完全可行：

• SnowSQL本身没有限制同一本地客户端同时启动多个独立进程，你可以在CMD中同时运行多个SnowSQL实例，每个实例分别负责向指定的internal stage执行上传任务，互相之间不会产生会话冲突。
• 实操注意事项：你可以通过-c参数为不同实例指定独立的连接配置，执行PUT命令时明确标注对应stage路径，避免出现文件上传路径错误。
• 你的场景下（4个并行进程、单文件125MB）基本不会触发Snowflake服务端的上传限流，上传效率上限仅取决于本地出口带宽，可获得接近线性的速度提升。
• 优化建议：可以编写简单的批处理脚本将200个文件拆分为4组，每组对应一个SnowSQL进程，单进程内执行PUT命令时可开启自带的并行参数：PUT file://<本地文件组路径> @<对应stage路径> AUTO_COMPRESS=TRUE PARALLEL=4，进一步提升单进程的上传效率。

问题2：调大warehouse规格是否能提升导入速度 #

需要分阶段判断：

• 仅针对文件上传到internal stage的阶段：调大warehouse规格完全不会提升速度。文件上传到stage的过程是直接和Snowflake的云存储层交互，全程不占用warehouse计算资源，无论使用什么规格的warehouse，上传速度都不会有差异。
• 针对后续将stage内文件执行COPY INTO导入到表的阶段：调大warehouse规格可以获得显著的速度提升。COPY操作属于计算密集型任务，涉及文件解析、格式校验、数据分片、列式存储写入等步骤，warehouse规格每提升一个等级，处理速度基本可实现线性提升，你可以根据预期耗时调整warehouse大小，导入完成后降回原规格即可控制成本。

内容的提问来源于stack exchange，提问作者Faisal Shani