Python类方法多进程执行问题：进程间字典未更新求解

问题原因 #

多进程和线程的核心区别在于内存隔离：

• 线程运行在同一进程空间内，所有线程共享进程内存，因此线程中修改类实例的字典会直接作用于原对象。
• 而multiprocessing.Pool创建的子进程会复制父进程的内存空间（包括类实例），每个子进程操作的都是原实例的独立副本。你在子进程里修改self.dict1，只是修改了副本中的字典，原进程的a.dict1完全不受影响，所以执行后看不到任何变化。

你第一段代码中，pool.imap(self.add_smt, ...)会把当前Test实例的副本传递给每个子进程，子进程内的self.dict1和原实例的字典毫无关联，修改自然不会同步回去。

简便解决方案 #

方案1：使用共享内存字典（推荐） #

通过multiprocessing.Manager创建共享字典，所有子进程都操作同一个共享字典，无需手动返回结果再同步。修改后的代码如下：

from multiprocessing import Pool, Manager

class Test():
    def __init__(self):
        # 使用Manager创建跨进程共享的字典
        self.dict1 = Manager().dict({str(i): i for i in range(1, 10)})
        
    def add_smt(self, arg):
        key, indice = arg
        self.dict1[key] += 1
        print(f"key: {key}, indice: {indice}, new_value: {self.dict1[key]}\n")
        
    def add_smt_multiprocess(self):
        with Pool() as pool:
            pool.imap(self.add_smt, zip(self.dict1.keys(), range(1, len(self.dict1.keys()))))
            pool.close()
            pool.join()

a = Test()
a.add_smt_multiprocess() 
print(a.dict1)  # 此时字典已被所有子进程修改

方案2：保留返回结果同步方式 #

你自己实现的“返回键值对再更新原字典”的方法是可行的，本质是通过进程间通信（返回值）把修改结果同步回原进程。如果你的业务逻辑需要对返回结果做额外处理，这种方式依然适用。

关于静态方法的问题 #

静态方法无法直接访问类实例的属性，除非你把共享字典作为参数传递进去，但这会破坏类的封装性，不如使用共享字典的方案简洁高效。

内容的提问来源于stack exchange，提问作者ReduceProblems