Snakemake缓存目录tmp*文件夹引发磁盘配额超限问题咨询

这些tmp*文件夹是什么？ #

这些是Snakemake执行工作流时生成的临时缓存目录，用于存放运行过程中的临时环境文件、中间数据或依赖缓存。当流程涉及容器运行、远程执行或环境隔离场景时，Snakemake会创建这类临时目录来保障运行环境的独立性。正常情况下流程结束后会自动清理，但如果流程意外崩溃、被强制终止，这些临时目录就会遗留下来，日积月累占用大量磁盘空间。

能否直接删除？ #

完全可以安全删除所有以tmp开头的文件夹。这些都是未被正常清理的临时数据，删除后不会影响已完成的工作流结果，也不会干扰后续的Snakemake运行。如果担心误删，可先删除少量目录测试，确认无问题后再批量清理。

有没有自动清理这些文件夹的方法？ #

• 添加命令行参数自动清理：运行Snakemake时加上--delete-temp-output参数，它会自动清理规则中标记为temp()的中间文件，同时也会处理runtime-cache下的临时缓存目录。另外，--cleanup-shadow参数可针对shadow运行模式下的临时文件进行清理。
• 配置缓存管理策略：可以通过设置环境变量SNAKEMAKE_CACHE_DIR指定自定义缓存目录，方便集中管理和清理；也可以在Snakemake配置文件中配置缓存的过期规则，自动清理老旧的缓存文件。
• 定时手动清理脚本：写一个简单的shell脚本批量清理tmp目录，比如：

  rm -rf ~/.cache/snakemake/snakemake/source-cache/runtime-cache/tmp*
  

  将脚本加入Linux的cron定时任务，就能定期自动清理。
• 规范流程终止方式：尽量使用正常的终止命令（如Ctrl+C）停止Snakemake流程，避免强制杀死进程，让Snakemake有机会完成临时文件的清理工作。

内容的提问来源于stack exchange，提问作者Homap