Dask 0.16.0本地集群Worker目录配置失败，求助排查

首先，你遇到的问题大概率是配置参数的层级不对，或是对Dask 0.16.0的配置结构不熟悉，并非遗漏了dask_worker.py里的配置。我给你拆解一下正确的配置方式：

1. 确认正确的配置参数与层级 #

在Dask 0.16.0版本中，Worker的本地存储目录参数是local_dir，但它必须放在worker配置节点下，不能直接写在config.yaml的根级别。比如你如果直接写：

local_dir: /path/to/ssd

Dask会完全忽略这个根节点下的参数。正确的配置结构应该是：

worker:
  local_dir: /path/to/ssd

2. 验证配置是否生效的小技巧 #

• 启动Worker时加上--debug参数，查看日志里的配置加载情况：

  dask-worker scheduler:8786 --debug
  

  日志中应该会出现类似Worker is configured with local_dir=/path/to/ssd的内容，确认路径是否正确加载。
• 如果配置文件还是不生效，可以直接用命令行参数强制指定路径（会覆盖配置文件设置），用来排查问题：

  dask-worker scheduler:8786 --local-dir /path/to/ssd
  

  要是这种方式能生效，说明你的配置文件要么没被正确识别，要么层级有误。

3. 配置文件的命名与加载路径注意点 #

Dask默认识别的配置文件名是dask_config.yaml，而非config.yaml——这可能是你踩的另一个坑！如果坚持用自定义文件名，启动Worker时需要用--config参数指定路径：

dask-worker scheduler:8786 --config /path/to/your/config.yaml

另外，Dask也会从~/.config/dask/config.yaml（用户级）或系统级路径加载配置，你也可以把配置放在这些默认位置。

4. 为什么其他参数没生效？ #

你尝试的local-directory和local_directory都是命令行参数的命名方式（比如--local-directory），但在配置文件中对应的参数名是下划线分隔的local_dir，所以那两个参数在config.yaml里是无效的，只有local_dir是正确的配置文件参数名。

总结一下，先调整配置文件的层级和文件名，这应该就能解决你的问题了。

内容的提问来源于stack exchange，提问作者skibee