如何向multiprocessing Pool传递不可pickle的变量？（Python2/Abaqus环境）

你遇到的pickle.PicklingError根源在于multiprocessing.Pool默认依赖pickle序列化数据传递给子进程，但Abaqus的OdbStep对象包含进程绑定的内部资源，无法被pickle序列化；同时打开的zip文件句柄属于进程私有资源，也不能跨进程传递。且你受限于Python 2（Abaqus内嵌版本），无法使用小众库或升级环境。

核心原则是避免在进程间传递不可pickle的对象，改为让每个子进程独立完成资源初始化与数据处理：

1. 子进程通过ODB文件路径和Step名称自行打开文件、获取目标Step对象，而非主进程直接传递OdbStep实例。
2. 子进程将提取结果写入临时文件，主进程统一将所有临时文件打包到zip中，绕过跨进程传递文件句柄的问题。

from odbAccess import *
import multiprocessing as mp
import tempfile
import os
import zipfile

def extraction(step_name, odb_path):
    # 子进程独立初始化ODB资源
    odb = openOdb(odb_path)
    step = odb.steps[step_name]
    
    # 替换为你的实际结果提取逻辑，这里用临时文件保存输出
    with tempfile.NamedTemporaryFile(mode='w', delete=False, suffix='.txt') as temp_f:
        # 示例：写入Step的基本信息，替换为你的提取代码
        temp_f.write(f"Step Name: {step.name}\nStep Type: {step.type}\n")
        temp_file_path = temp_f.name
    
    odb.close()
    return temp_file_path

if __name__ == '__main__':
    odb_path = "path_to_my_odb_file"
    # 主进程仅获取Step名称列表，避免持有ODB对象
    odb = openOdb(odb_path)
    step_names = odb.steps.keys()
    odb.close()
    
    pool = mp.Pool(2)
    # 传递可序列化的字符串（路径、Step名称）而非不可pickle对象
    temp_files = pool.map(lambda name: extraction(name, odb_path), step_names)
    pool.close()
    pool.join()
    
    # 主进程统一打包临时文件到zip
    with zipfile.ZipFile('abq_extraction_results.zip', 'w') as zip_f:
        for temp_path in temp_files:
            zip_f.write(temp_path, os.path.basename(temp_path))
            os.unlink(temp_path)  # 清理临时文件

• 绕过pickle限制：子进程通过路径和名称重新初始化ODB资源，完全避免了序列化OdbStep对象的需求。
• 安全处理文件写入：临时文件方式避免了跨进程共享文件句柄的风险，且主进程统一打包更易控制输出完整性。
• 避免ODB文件冲突：主进程在获取Step名称后立即关闭ODB，防止子进程打开时出现文件锁定问题。

内容的提问来源于stack exchange，提问作者Avatar36