crawl-300d-2M-subword.zip下载或解压失败问题求助

问题说明 #

Windows下下载该模型包时，最后几KB总是中断；Ubuntu用wget下载完成后，解压crawl-300d-2M-subword.bin时触发CRC校验失败：

unzip crawl-300d-2M-subword.zip
Archive:  crawl-300d-2M-subword.zip
  inflating: crawl-300d-2M-subword.vec
  inflating: crawl-300d-2M-subword.bin   bad CRC ff925bde  (should be e9be08f7)

解决办法 #

• 断点续传重新下载
  先确认下载的zip包大小是否达标（约1.6GB），如果大小不对，用wget断点续传修复：

  wget -c https://dl.fbaipublicfiles.com/fasttext/vectors-english/crawl-300d-2M-subword.zip
  

  要是wget还是不行，换用多线程下载工具aria2，稳定性更好：

  aria2c -x 16 https://dl.fbaipublicfiles.com/fasttext/vectors-english/crawl-300d-2M-subword.zip
  

• 换7-Zip解压
  系统自带的unzip对大压缩包的CRC校验经常出问题，装7-Zip后用这个命令解压：

  7z x crawl-300d-2M-subword.zip
  

• 校验文件哈希值
  找官方发布的SHA256哈希值，用下面的命令核对文件完整性：

  sha256sum crawl-300d-2M-subword.zip
  

  哈希不匹配就说明文件确实坏了，必须重新下载。

内容的提问来源于stack exchange，提问作者Betty