如何从Python字典构建Dask HighLevelGraph及获取依赖关系?
Dask HighLevelGraph 相关问题解答
1. 从字典反向构建 HighLevelGraph
Dask 的 HighLevelGraph 没有直接的逆向构造快捷方法,但可以通过其构造函数手动实现:
- 从
HighLevelGraph转出的字典结构为{层名称: 层对象},其中层对象属于Layer子类(如ArrayLayer、BagLayer) - 直接将该字典传入
HighLevelGraph的构造函数即可:HighLevelGraph(layers=你的字典实例) - 若字典中的层未包含依赖信息,还需额外传入
dependencies参数,格式为记录层间依赖关系的字典
2. 从字典获取类似 dependencies 的依赖关系
如果字典是通过 HighLevelGraph.to_dict() 生成的,可通过以下方式获取依赖:
- 遍历字典中的每个层对象,调用层对象的
.dependencies属性,即可得到该层的依赖关系 - 若要生成全局的依赖汇总结构,可手动收集所有层的依赖信息,整理成与
HighLevelGraph.dependencies一致的嵌套字典格式
内容的提问来源于stack exchange,提问作者Tarantula
相关产品推荐
相关产品推荐

