Python后台启动子进程并捕获stdout遇阻塞问题求助

首先，你遇到的阻塞问题大概率是因为子进程的stdout缓冲区满了，导致子进程挂起，进而让你的主进程也卡住。当用subprocess.Popen指定stdout=PIPE时，如果不及时读取缓冲区内容，子进程会因为无法输出而暂停执行，这就是阻塞的根源。下面给你两种解决思路：

一、修复subprocess.Popen的用法：用线程异步读取stdout #

我们可以单独开一个线程来读取子进程的stdout，这样主进程不需要等待输出，可以正常执行终止逻辑。示例代码如下：

import subprocess
import threading
import time

# 用于存储子进程的stdout输出
child_stdout = []

def read_stdout(process):
    # 逐行读取子进程输出，避免缓冲区阻塞
    for line in iter(process.stdout.readline, b''):
        child_stdout.append(line.decode('utf-8'))
    process.stdout.close()

# 启动子进程（替换成你的目标脚本路径）
cmd = ["python", "your_target_script.py"]
proc = subprocess.Popen(cmd, stdout=subprocess.PIPE, stderr=subprocess.STDOUT)

# 启动线程读取stdout
stdout_thread = threading.Thread(target=read_stdout, args=(proc,))
stdout_thread.daemon = True  # 主线程结束时自动退出
stdout_thread.start()

# 等待指定时长
time.sleep(3)

# 终止子进程
proc.terminate()
try:
    proc.wait(timeout=1)  # 等待进程退出，避免僵尸进程
except subprocess.TimeoutExpired:
    proc.kill()

# 合并输出到变量
output = ''.join(child_stdout)
print("子进程输出：", output)

这里的核心是用线程异步读取输出，避免主进程被阻塞。同时用iter(process.stdout.readline, b'')逐行读取，比直接read()更灵活，不会一直等待EOF。如果子进程有stderr输出，建议用stderr=subprocess.STDOUT合并到stdout，或者单独开线程读取，避免同样的阻塞问题。

二、替代模块：用psutil更便捷地管理进程 #

psutil是一个跨平台的进程管理库，比subprocess更强大，能更直观地控制进程、监控状态（比如CPU/内存占用）。先安装它：pip install psutil

示例代码：

import psutil
import subprocess
import time
import threading

child_stdout = []

def read_stdout(process):
    for line in iter(process.stdout.readline, b''):
        child_stdout.append(line.decode('utf-8'))
    process.stdout.close()

# 启动子进程
cmd = ["python", "your_target_script.py"]
proc = subprocess.Popen(cmd, stdout=subprocess.PIPE, stderr=subprocess.STDOUT)
ps_proc = psutil.Process(proc.pid)

# 启动读取线程
stdout_thread = threading.Thread(target=read_stdout, args=(proc,))
stdout_thread.daemon = True
stdout_thread.start()

# 等待指定时长
time.sleep(3)

# 终止进程（psutil提供terminate/kill等多种终止方式）
ps_proc.terminate()
ps_proc.wait(timeout=2)

# 获取输出
output = ''.join(child_stdout)
print("子进程输出：", output)

如果你的需求只是启动外部Python脚本，subprocess足够用；如果需要更复杂的进程监控或管理，psutil会是更好的选择。另外，要是你想启动同一个项目里的Python函数而非外部脚本，也可以考虑multiprocessing模块，它更适合内部进程的调度。

内容的提问来源于stack exchange，提问作者rashok