Google Colab中Python子进程无输出问题求助

这个问题确实是平台依赖性导致的：本地Jupyter Notebook的内核和子进程共享同一个终端输出流，子进程的print或日志能直接同步到前端；但Colab运行在云端虚拟机中，子进程的标准输出（stdout）不会自动被转发到前端的输出窗口，所以你看不到任何内容。

下面给你几个直接可行的解决方案：

方案1：用Queue传递子进程输出到主进程 #

通过multiprocessing.Queue让子进程把要输出的内容发送给主进程，再由主进程负责打印，这样就能在Colab里正常看到输出了：

from multiprocessing import Process, Queue
import time

def simple_fun(proc_id, output_queue):
    while True:
        time.sleep(1)
        msg = f"Process {proc_id} is running"
        output_queue.put(msg)

N_PROCESS = 2
output_queue = Queue()
processes = []

# 启动子进程
for i in range(N_PROCESS):
    p = Process(target=simple_fun, args=(i, output_queue))
    p.start()
    processes.append(p)

# 主进程循环读取队列并打印
try:
    while True:
        if not output_queue.empty():
            print(output_queue.get())
        time.sleep(0.1)
except KeyboardInterrupt:
    # 捕获中断信号，清理子进程
    for p in processes:
        p.terminate()
        p.join()

方案2：配置logging模块实现跨进程日志输出 #

如果想用logging模块，只需在主进程统一配置日志规则，子进程直接复用即可，Colab会捕获主进程的日志输出：

from multiprocessing import Process
import time
import logging

# 主进程配置日志格式和级别
logging.basicConfig(
    level=logging.INFO,
    format='[%(process)d] %(asctime)s - %(message)s'
)

def simple_fun(proc_id):
    logger = logging.getLogger()
    while True:
        time.sleep(1)
        logger.info(f"Process {proc_id} output")

N_PROCESS = 2
processes = []

for i in range(N_PROCESS):
    p = Process(target=simple_fun, args=(i,))
    p.start()
    processes.append(p)

# 保持主进程存活，避免脚本提前终止
try:
    while True:
        time.sleep(1)
except KeyboardInterrupt:
    for p in processes:
        p.terminate()
        p.join()

方案3：将子进程输出写入文件，实时查看 #

如果不想修改太多原有代码，可以让子进程把输出写入文件，再通过Colab的命令行工具实时查看：

from multiprocessing import Process
import time
import sys

def simple_fun(proc_id):
    # 重定向stdout到日志文件
    sys.stdout = open(f"proc_{proc_id}.log", "a")
    while True:
        time.sleep(1)
        print(f"Process {proc_id} output")
        # 强制刷新缓冲区，避免内容滞留在内存
        sys.stdout.flush()

N_PROCESS = 2
processes = []

for i in range(N_PROCESS):
    p = Process(target=simple_fun, args=(i,))
    p.start()
    processes.append(p)

然后在新的代码单元格运行命令实时查看日志：

!tail -f proc_0.log proc_1.log

关键提醒 #

1. Colab仅会捕获主进程的输出流，子进程的stdout/stderr默认是独立的，必须通过队列、文件、日志这类中间媒介把内容传递到主进程才能显示。
2. 对于长期运行的子进程，记得用KeyboardInterrupt（按Colab的停止按钮）触发清理逻辑，避免云端虚拟机残留僵尸进程。

内容的提问来源于stack exchange，提问作者ckorzhik