如何指定WandB日志存储目录？共享服务器场景配置疑问

一、指定WandB日志存储目录的方法 #

WandB确实没有在init参数里提供直接设置存储路径的选项，但可以通过以下两种方式指定目录：

• 环境变量临时配置：在运行实验脚本前，设置WANDB_DIR环境变量。比如在bash终端中执行：

  export WANDB_DIR=/path/to/your/compliant/directory
  

  或者在Python脚本开头直接设置：

  import os
  os.environ["WANDB_DIR"] = "/path/to/your/compliant/directory"
  

  这样WandB会自动将所有日志、缓存、临时文件都写入这个指定目录。
• 全局配置永久生效：编辑用户目录下的WandB配置文件~/.wandb/settings，添加或修改dir字段：

  dir = /path/to/your/compliant/directory
  

  配置后所有WandB实验都会默认使用这个目录，适合长期固定服务器环境的需求。

二、软链接方案的可行性 #

这个方案完全可行，操作时注意以下细节即可：

1. 停止运行中的实验：确保没有正在执行的WandB进程，避免文件读写冲突导致数据损坏。
2. 完整迁移文件夹：将原脚本路径下的wandb文件夹完整移动到合规目录，比如：

   mv ./wandb /path/to/compliant/directory/
   

3. 创建软链接：回到原脚本路径，创建指向合规目录下wandb文件夹的软链接：

   ln -s /path/to/compliant/directory/wandb ./wandb
   

4. 检查权限：确认合规目录的读写权限与原目录一致，保证WandB进程能正常写入文件。
5. 测试验证：运行一个小型测试实验，检查日志是否正常写入合规目录，软链接是否正常生效。

内容的提问来源于stack exchange，提问作者Jack Avante