Python multiprocessing模块无法运行进程问题求助

结合你的代码和使用环境（WinPython3.6.3 + Spyder），这是Windows平台下使用multiprocessing的典型兼容性问题，我整理了几个关键的解决步骤：

1. 让主进程等待子进程完成 #

你的代码启动了子进程，但没有等待它们执行完毕就可能提前退出——主进程结束后，Windows会直接终止所有未完成的子进程，导致它们没机会完成文件写入。修改代码添加join()方法：

import multiprocessing

# 假设你的full_graph函数定义在这里
def full_graph():
    # 给每个进程的输出文件加唯一标识，方便排查
    with open(f"graph_output_{multiprocessing.current_process().name}.txt", "w") as f:
        f.write("测试输出内容")

if __name__ == '__main__':
    jobs = []
    for i in range(5):
        p = multiprocessing.Process(target=full_graph, name=f"Process-{i}")
        jobs.append(p)
        p.start()
    
    # 等待所有子进程执行完成
    for p in jobs:
        p.join()
    
    print("所有图表生成任务已完成")

2. 切换到Spyder的标准Python控制台 #

Spyder默认的IPython控制台对Windows的multiprocessing支持存在兼容性问题，子进程的文件操作可能被控制台环境拦截。你可以：

• 点击Spyder顶部菜单栏的 Consoles > Open a Python console
• 在新打开的标准Python控制台中运行代码，子进程的行为会更符合预期

3. 使用绝对路径写入文件 #

子进程的工作目录可能和主进程不一致（尤其是在Spyder环境中），导致你找不到写入的文件。修改full_graph中的文件路径为绝对路径：

import os
import multiprocessing

def full_graph():
    # 获取当前脚本所在的绝对目录
    script_dir = os.path.dirname(os.path.abspath(__file__))
    # 拼接输出文件的绝对路径
    output_file = os.path.join(script_dir, f"graph_output_{multiprocessing.current_process().pid}.txt")
    
    with open(output_file, "w") as f:
        f.write("来自子进程的有效输出")

4. 显式设置multiprocessing启动方法（可选） #

Windows下multiprocessing默认用spawn启动方法，但有时候显式指定能避免环境异常：

if __name__ == '__main__':
    # 显式设置启动方法为spawn（Windows推荐）
    multiprocessing.set_start_method('spawn')
    
    jobs = []
    for i in range(5):
        p = multiprocessing.Process(target=full_graph)
        jobs.append(p)
        p.start()
    
    for p in jobs:
        p.join()

验证步骤 #

1. 先单独调用full_graph()，确认能正常生成输出文件
2. 用修改后的代码在标准Python控制台运行
3. 检查脚本目录下是否生成了多个带进程标识的输出文件

内容的提问来源于stack exchange，提问作者J.Barker