咨询：Multiprocessing中全局变量未更新，进程无法向全局列表赋值

问题根源：多进程的内存隔离机制 #

嘿，你遇到的问题其实是Python多进程的核心特性导致的——每个子进程都有独立的内存空间。当你在主进程里定义一个全局字典后，每个子进程启动时会复制一份这个字典到自己的内存里，子进程里对字典的修改都是在这份副本上操作的，完全不会影响主进程里的原字典。所以等所有子进程跑完，主进程的字典还是保持初始状态，自然看不到子进程添加的内容。

两种可行的解决方案 #

方案1：使用multiprocessing.Manager创建共享字典 #

multiprocessing.Manager会启动一个专门的服务进程来管理共享数据，所有子进程通过代理对象访问这个共享字典，这样所有修改都会同步到同一个字典实例上。

给你一个修改后的测试代码示例：

import multiprocessing

def fill_dict(shared_dict, key, value):
    shared_dict[key] = value

if __name__ == "__main__":
    # 创建可跨进程共享的字典
    with multiprocessing.Manager() as manager:
        my_dict = manager.dict()
        processes = []
        
        # 启动多个子进程填充字典
        for i in range(5):
            p = multiprocessing.Process(
                target=fill_dict, 
                args=(my_dict, f"key_{i}", f"value_{i}")
            )
            processes.append(p)
            p.start()
        
        # 等待所有子进程执行完成
        for p in processes:
            p.join()
        
        # 现在主进程能看到子进程添加的所有内容了
        print(dict(my_dict))

方案2：使用Queue传递数据，主进程统一整理 #

如果你不想依赖Manager，也可以让子进程把要添加的键值对放到队列里，等所有子进程跑完后，主进程从队列里取出数据并添加到自己的字典中。这种方式更轻量化，适合数据量较大的场景：

import multiprocessing

def produce_items(queue, start_num):
    for i in range(start_num, start_num+3):
        queue.put((f"key_{i}", f"value_{i}"))

if __name__ == "__main__":
    my_dict = {}
    queue = multiprocessing.Queue()
    processes = []
    
    # 启动子进程生产数据
    p1 = multiprocessing.Process(target=produce_items, args=(queue, 0))
    p2 = multiprocessing.Process(target=produce_items, args=(queue, 3))
    processes.extend([p1, p2])
    
    for p in processes:
        p.start()
    
    # 等待所有子进程完成任务
    for p in processes:
        p.join()
    
    # 从队列取出数据填充主进程的字典
    while not queue.empty():
        key, value = queue.get()
        my_dict[key] = value
    
    print(my_dict)

小提醒 #

• 使用Manager的共享字典会有一定性能开销，因为所有操作都要通过服务进程转发，适合数据量不大、并发数不高的场景。
• 如果需要更高效的共享数据方式，还可以考虑multiprocessing.Array或multiprocessing.Value，但这两者更适合单一类型的简单数据，字典场景还是Manager或Queue更实用。

内容的提问来源于stack exchange，提问作者jo2083248