如何更快地在磁盘间传输大容量MBTiles格式地图？

• 使用rsync优化传输：
  针对大文件场景，rsync可通过调整块大小降低系统调用开销，还支持断点续传。推荐命令：

  rsync --progress --inplace --block-size=131072 /source/path/your_file.mbtiles /destination/path/
  

  参数说明：

  • --progress：实时显示传输进度
  • --inplace：直接在目标位置写入数据，避免额外磁盘IO操作
  • --block-size=131072：设置128KB块大小（可根据磁盘性能调整），减少IO交互次数

• 用dd直接读写磁盘块：
  跳过文件系统部分缓存逻辑，直接操作磁盘块，适合单一大文件传输：

  dd if=/source/path/your_file.mbtiles of=/destination/path/your_file.mbtiles bs=2M status=progress
  

  • bs=2M：设置2MB块大小（可根据内存和磁盘性能调高）
  • status=progress：显示实时传输进度

• 临时优化系统磁盘缓存（Linux）：
  若传输瓶颈在磁盘IO，可临时增大系统脏页缓存，让系统攒足数据后批量写入磁盘：

  # 临时设置脏页大小为1GB（单位：字节）
  echo 1073741824 > /proc/sys/vm/dirty_bytes
  

  传输完成后建议恢复默认值（可先通过cat /proc/sys/vm/dirty_bytes查看原始值），注意：此操作会提升断电丢数据风险，仅适合稳定环境使用。

• 并行压缩传输（仅CPU空闲且IO是瓶颈时尝试）：
  MBTiles基于SQLite格式，压缩率有限，但如果磁盘IO严重受限，可借助并行压缩工具pigz减少传输数据量：

  pigz -c /source/path/your_file.mbtiles | pigz -d > /destination/path/your_file.mbtiles
  

  此方法依赖CPU性能，若CPU已满载会拖慢传输速度。

内容的提问来源于stack exchange，提问作者Alperen Ölçer