无服务器root权限仅具文件访问权限，如何批量下载站点序列PDF文件？

之前执行的递归抓取命令无法生效的核心原因，是你本身没有/storage/files/子路径的目录列表访问权限。wget递归爬取的核心逻辑是加载目标目录页、解析页面内的所有文件链接再逐一下载，当目录访问被拒时，根本无法获取到任何有效文件条目，自然不会触发下载动作。

由于所有目标文件的文件名是固定规则的有序序列，完全不需要依赖目录列表爬取，可直接按拼接规则生成全量URL发起下载，具体实现分两种常用路径：

wget 原生序列下载 #

wget 支持直接识别shell的花括号序列展开语法，不需要额外依赖其他工具，直接执行对应命令即可批量匹配两类文件：

• 纯数字串类文件下载命令：
  wget -t 1 -nd -nc -erobots=off https://blablabla.com/storage/files/{1..99999999}.pdf
• im前缀类文件下载命令：
  wget -t 1 -nd -nc -erobots=off https://blablabla.com/storage/files/im{1..99999999}.pdf

对应参数作用说明：

• -t 1：单链接仅重试1次，不对404不存在的文件反复发起请求
• -nd：不自动创建嵌套层级目录，所有下载文件直接保存在当前命令执行目录
• -nc：自动跳过已存在的同名文件，避免重复下载占用带宽
• 可选优化参数：如果全量序列请求过密可添加--wait=0.2，设置两次请求间隔200毫秒，降低触发站点临时拦截的概率

curl 并行加速下载 #

如果单线程wget下载速度无法满足需求，可使用curl配合xargs实现可控并行下载：

• 纯数字串类文件并行下载命令（并行度可调）：
  seq 1 99999999 | xargs -P 10 -I {} curl -s -f -o "{}.pdf" "https://blablabla.com/storage/files/{}.pdf"
• im前缀类文件并行下载命令：
  seq 1 99999999 | xargs -P 10 -I {} curl -s -f -o "im{}.pdf" "https://blablabla.com/storage/files/im{}.pdf"

对应参数作用说明：

• -P 10：设置10个并行请求，可根据站点响应速度调整，最高不建议超过20，避免给站点造成过大压力触发IP限制
• -f：遇到404、403等错误状态码直接静默终止请求，不会把错误响应内容保存为pdf文件
• -s：关闭冗余进度日志，保持终端输出简洁

实操注意事项：所有全量任务启动前，请先手动测试3-5个已知存在的文件URL（即你提到的示例文件名对应的完整链接），确认路径拼接格式正确、无访问拦截后再启动全量批量任务，避免空跑产生无效请求。

内容的提问来源于stack exchange，提问作者Max Sean