Mac M1运行TensorFlow GAN首个epoch结束时出现段错误如何解决?
Mac M1运行TensorFlow GAN模型段错误修复方案
该问题由Mac M1系列芯片对多线程进程的兼容性缺陷导致,是TensorFlow默认并行逻辑与M1适配冲突触发的segmentation fault,可按以下步骤修复:
- 限制TensorFlow全局线程数,在代码导入TensorFlow后立刻添加以下配置:
import tensorflow as tf # 限制算子间并行线程数为1 tf.config.threading.set_inter_op_parallelism_threads(1) # 限制算子内并行线程数为1 tf.config.threading.set_intra_op_parallelism_threads(1)
如果使用tf.data加载数据集,需要同时将map方法的num_parallel_calls参数、prefetch方法的参数均设置为1,关闭多线程数据加载逻辑
- 卸载原有TensorFlow,安装Apple官方适配的M1版本TensorFlow,激活对应conda环境后执行以下命令:
conda install -c apple tensorflow-depspip install tensorflow-macos tensorflow-metal
你的Python 3.8版本符合适配要求,无需更换Python版本 - 关闭训练流程中所有多进程数据增强、批量预处理逻辑,所有涉及并行处理的第三方工具接口全部改为单进程运行。
- 若以上操作仍未解决问题,运行代码前先在终端执行以下命令设置环境变量,再启动训练脚本:
export OBJC_DISABLE_INITIALIZE_FORK_SAFETY=YES
该环境变量可修复Mac系统下Python多进程fork操作触发的段错误问题。
内容的提问来源于stack exchange,提问作者Ulto 4
相关产品推荐
相关产品推荐

